KR102140072B1 - 이미지 합성 방법 및 그 전자 장치 - Google Patents

이미지 합성 방법 및 그 전자 장치 Download PDF

Info

Publication number
KR102140072B1
KR102140072B1 KR1020160040268A KR20160040268A KR102140072B1 KR 102140072 B1 KR102140072 B1 KR 102140072B1 KR 1020160040268 A KR1020160040268 A KR 1020160040268A KR 20160040268 A KR20160040268 A KR 20160040268A KR 102140072 B1 KR102140072 B1 KR 102140072B1
Authority
KR
South Korea
Prior art keywords
picture
electronic device
user
information
photo
Prior art date
Application number
KR1020160040268A
Other languages
English (en)
Other versions
KR20170112743A (ko
Inventor
정준성
김선화
이재영
최기쁨
최선
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160040268A priority Critical patent/KR102140072B1/ko
Priority to US15/401,739 priority patent/US10043260B2/en
Priority to EP17775656.6A priority patent/EP3366038A4/en
Priority to PCT/KR2017/001607 priority patent/WO2017171231A1/en
Priority to CN201780017436.3A priority patent/CN108781262B/zh
Publication of KR20170112743A publication Critical patent/KR20170112743A/ko
Priority to US16/026,687 priority patent/US11145047B2/en
Application granted granted Critical
Publication of KR102140072B1 publication Critical patent/KR102140072B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H04N2005/2726—Means for inserting a foreground image in a background image, i.e. inlay, outlay for simulating a person's appearance, e.g. hair style, glasses, clothes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 다양한 실시 예에 따른 전자 장치는 사진이 저장되어 있는 메모리, 사용자 인터렉션을 감지하는 디스플레이, 외부의 서버와 통신을 수행하는 통신 인터페이스 및 메모리로부터 사진을 독출하고, 가중치에 기초하여 사진을 1차 선별하고, 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정하고, 제 1 속성 정보 및 제 2 속성 정보를 데이터베이스 형태로 메모리에 저장하고, 제 1 속성 정보, 제 2 속성 정보 및 사용자 컨텍스트 정보에 기초하여 1 차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별하고, 2차 선별된 사진에 대응하는 상품 이미지를 서버로부터 수신하도록 상기 통신 인터페이스를 제어하고, 2차 선별된 사진과 상품이미지를 합성하여 합성 이미지를 생성하는 프로세서;를 포함할 수 있다.

Description

이미지 합성 방법 및 그 전자 장치{METHOD FOR COMPOSING IMAGE AND AN ELECTRONIC DEVICE THEREOF}
본 문서의 다양한 실시 예는 가상 의류 착용 서비스 제공 방법 및 시스템에관한 것이다. 더욱 상세하게는 사용자의 모습이 포함된 사진과 상품 이미지를 합성하여 사용자의 단말장치 또는 LFD(Large Flat Display)에 제공하는 것이다.
컴퓨터 및 통신 기술의 발달로 전자장치는 소형화 되고 여러 기능을 포함할수 있게 되었다. 특히 전자장치는 카메라를 내장하여 이미지를 생성하며 생성된 이미지를 무선 통신 기능을 통해 원격지에 있는 서버로 전송할 수 있다.
한편 사용자는 의류 또는 액세서리와 같은 상품을 구매하기 위해 오프라인 또는 온라인을 이용하여 다양한 구매 방법을 이용할 수 있다. 이와 같은 방법을 이용하여 의류 또는 액세서리 구매 시 사용자는 아바타(Avata) 또는 모델 등의 타인이 착용한 상태의 상품을 보고 구매를 결정한다. 이런 경우, 실제 사용자가 의류 및 액세서리를 착용하지 못해 예측하지 못한 결과가 나타나기도 하여 불편함이 있다. 또한 계절 및 주변 환경이 변화되었을 때 구매한 의류 및 액세서리가 사용자와 어울리지 못할 수도 있어 다양한 문제가 발생할 수 있다.
본 발명의 다양한 실시 예는 전술한 문제점을 해결하기 위해, 사용자가 과거에 촬영했던 사진 중에서 사용자가 선호하는 사진을 선별하고 선별된 사진에 사용자가 구매하려는 의류 또는 액세서리를 합성한 이미지를 생성하여 제공하는 데 그 목적이 있다.
본 발명의 다양한 실시예에 따른 전자 장치의 합성 이미지 생성 방법은, 가중치에 기초하여 사진을 1차 선별하는 단계; 상기 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정하는 단계; 상기 제 1 속성 정보 및 상기 제 2 속성 정보를 데이터베이스 형태로 메모리에 저장하는 단계; 상기 제 1 속성 정보, 상기 제 2 속성 정보 및 사용자 컨텍스트(context) 정보에 기초하여 상기 1차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별 하는 단계; 상기 2차 선별된 사진에 대응하는 상품 이미지를 서버로부터 수신하는 단계; 및 상기 2차 선별된 사진과 상기 상품 이미지를 합성하여 합성 이미지를 생성하는 단계;를 포함할 수 있다. 상기 가중치는 사진이 생성된 날짜에 기초하여 결정될 수 있다. 또는 상기 가중치는 사진에 포함된 객체의 모습에 기초하여 결정될 수 있다. 또는 상기 가중치는 사진의 공유여부에 기초하여 결정될 수 있다. 또는 상기 가중치는 사용자 인터렉션에 기초하여 결정될 수 있다. 상기 사용자 인터렉션은 사진이 화면에 표시되는 동안 검출될 수 있다. 상기 사용자 인터렉션이 줌인 제스처인 경우에는 상기 가중치를 상승 시킬 수 있다. 상기 제 1 속성 정보는 사진에 포함된 객체에 대한 정보일 수 있다. 상기 제 2 속성 정보는 사진의 배경에 대한 정보일 수 있다. 상기 사용자 컨텍스트 정보는 사용자의 위치 정보를 포함할 수 있다.
본 발명의 다른 실시예에 따른 전자장치는 사진이 저장되어 있는 메모리; 사용자 인터렉션을 감지하는 디스플레이; 외부의 서버와 통신을 수행하는 통신 인터페이스; 및상기 메모리로부터 사진을 독출 하고, 가중치에 기초하여 상기 사진을 1차 선별하고, 상기 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정하고, 상기 제 1 속성 정보 및 상기 제 2 속성 정보를 데이터베이스 형태로 메모리에 저장하고, 상기 제 1 속성 정보, 상기 제 2 속성 정보 및 사용자 컨텍스트 정보에 기초하여 상기 1 차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별하고, 상기 2차 선별된 사진에 대응하는 상품 이미지를 서버로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 2차 선별된 사진과 상기 상품이미지를 합성하여 합성 이미지를 생성하는 프로세서;를 포함할 수 있다. 상기 가중치는 사진이 생성된 날짜에 기초하여 결정될 수 있다. 상기 가중치는 사진에 포함된 객체의 모습에 기초하여 결정될 수 있다. 상기 가중치는 사진의 공유여부에 기초하여 결정될 수 있다. 상기 가중치는 사용자 인터렉션에 기초하여 결정될 수 있다. 상기 사용자 인터렉션은 사진이 화면에 표시되는 동안 검출될 수 있다. 상기 전자장치는, 상기 사용자 인터렉션이 줌인 제스처인 경우에는 상기 가중치를 상승 시킬 수 있다. 상기 제 1 속성 정보는 사진에 포함된 객체에 대한 정보일 수 있다. 상기 제 2 속성 정보는 사진의 배경에 대한 정보일 수 있다. 상기 사용자 컨텍스트 정보는 사용자의 위치 정보를 포함할 수 있다.
본 발명의 다양한 실시 예에 따른 전자 장치는, 사진이 저장되어 있는 메모리, 사용자 인터렉션을 감지하는 디스플레이 및 프로세서를 포함하고, 상기 메모리로부터 사진을 독출하고, 가중치에 기초하여 상기 사진을 1차 선별하고, 상기 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정하고, 상기 제 1 속성 정보 및 상기 제 2 속성 정보를 데이터베이스 형태로 메모리에 저장하고, 상기 제 1 속성 정보, 상기 제 2 속성 정보 및 사용자 컨텍스트 정보에 기초하여 상기 1 차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별하고, 상기 2차 선별된 사진에 대응하는 상품 이미지를 서버로부터 수신하고, 상기 2차 선별된 사진과 상기 상품이미지를 합성하여 합성 이미지를 생성하고 화면에 표시함으로써 사용자가 실제 상품을 착용한 모습을 사용자에게 가상으로 보여줄 수 있다.
도 1은 다양한 실시 예들에 따른 전자 장치를 포함하는 네트워크 환경을 도시한 도면이다.
도 2는 본 발명의 일 실시 예에 따른 전자 장치의 블록도이다.
도 3 은 본 발명의 개략적인 흐름도이다.
도 4 는 전자장치에 저장된 복수의 사진을 선별하는 과정을 설명하는 도면이다.
도 5 는 전자장치가 서버로부터 수신한 사진을 선별하는 과정을 설명하는 도면이다.
도 6 은 사용자에 의해 생성된 사진에 대해 가중치를 부여하는 방법에 대한흐름도이다.
도 7 은 서버로부터 수신한 사진에 대해 가중치를 부여하는 방법에 대한흐름도이다.
도 8 은 선별된 사진으로부터 사진에 포함된 옷의 속성 정보 및 배경의 속성정보를 추출하는 예를 도시한 도면이다.
도 9a 내지 9b 는 사진의 속성 정보를 활용하여 사용자가 선호하는 옷을 추천하는 예를 도시한 도면이다.
도 10 은 사용자가 생성한 사진에 제 3 자가 제공한 상품 이미지를 합성하여 사용자에게 제공하는 예를 설명하기 위한 도면이다.
도 11 은 전자장치에 저장된 피팅용 사진에 상품 이미지를 합성하는 과정을 설명하는 도면이다.
도 12 는 본 발명의 일 실시예에 따른 전자장치에서 피팅용 사진에 상품 이미지를 합성하는 과정을 설명하는 흐름도이다.
이하, 본 문서의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 문서의 실시 예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 문서에서, "가진다", "가질 수 있다", "포함한다" 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 문서에서, "A 또는 B", "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B", "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 문서에서 사용된 "제 1", "제 2", "첫째" 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제 1 사용자 기기와 제 2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 문서에 기재된 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제 3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 가지는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)" 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어(hardware)적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"메모리라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU(central processing unit) 또는 AP(application processor))를 의미할 수 있다.
본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 문서에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 문서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 문서의 실시 예들을 배제하도록 해석될 수 없다.
본 문서의 다양한 실시 예들에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 전자책 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버중 적어도 하나를 포함할 수 있다. 어떤 실시 예들에서, 전자 장치는 가전 제품(home appliance)일 수 있다. 가전 제품은, 예를 들면, 텔레비전, TV 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시 예에 따르면, 전자 장치는 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터(projector) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예들에서, 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 어떤 실시 예에 따른 전자 장치는 플렉서블 전자 장치일 수 있다. 또한, 본 문서의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않으며, 기술 발전에 따른 새로운 전자 장치를 포함할 수 있다.
이하, 첨부 도면을 참조하여, 다양한 실시 예들에 따른 전자 장치가 설명된다. 본 문서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시 예들에 따른 전자 장치를 포함하는 네트워크 환경을 도시한 도면이다.
도 1을 참조하여, 다양한 실시예들에서의, 네트워크 환경(100) 내의 전자 장치(101)가 기재된다. 전자 장치(101)는 버스(bus)(110), 프로세서(processor)(120), 메모리(memory)(130), 입출력 인터페이스(input/output interface)(150), 디스플레이(display)(160), 및 통신 인터페이스(communication interface)(170)를 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)는, 구성요소들 중 적어도 하나를 생략하거나 다른 구성요소를 추가적으로 구비할 수 있다.
버스(110)는, 예를 들면, 구성요소들(110-170)을 서로 연결하고, 구성요소들 간의 통신(예: 제어 메시지 및/또는 데이터)을 전달하는 회로를 포함할 수 있다.
메모리(130)는, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 메모리(130)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성요소에 관계된 명령(command) 또는 데이터(data)를 저장할 수 있다. 한 실시예에 따르면, 메모리(130)는 소프트웨어(software) 및/또는 프로그램(program) (140)을 저장할 수 있다. 프로그램(140)은, 예를 들면, 커널(kernel)(141), 미들웨어(middleware)(143), 어플리케이션 프로그래밍 인터페이스(application programming interface(API))(145), 및/또는 어플리케이션 프로그램(또는 "어플리케이션")(147) 등을 포함할 수 있다. 커널(141), 미들웨어(143), 또는 API(145)의 적어도 일부는, 운영 시스템(operating system(OS))으로 지칭될 수 있다.
커널(141)은, 예를 들면, 다른 프로그램들(예: 미들웨어(143), API(145), 또는 어플리케이션 프로그램(147))에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스(110), 프로세서(120), 또는 메모리(130) 등)을 제어 또는 관리할 수 있다. 또한, 커널(141)은 미들웨어(143), API(145), 또는 어플리케이션 프로그램(147)에서 전자 장치(101)의 개별 구성요소에 접근함으로써, 시스템 리소스들을 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
미들웨어(143)는, 예를 들면, API(145) 또는 어플리케이션 프로그램(147)이 커널(141)과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다.
또한 미들웨어(143)는 어플리케이션 프로그램(147)으로부터 수신된 하나 이상의 작업 요청들을 우선 순위에 따라 처리할 수 있다. 예를 들면, 미들웨어(143)는 어플리케이션 프로그램(147) 중 적어도 하나에 전자 장치(101)의 시스템 리소스(예: 버스(110), 프로세서(120), 또는 메모리(130) 등)를 사용할 수 있는 우선 순위를 부여할 수 있다. 예컨대, 미들웨어(143)는 상기 적어도 하나에 부여된 우선 순위에 따라 상기 하나 이상의 작업 요청들을 처리함으로써, 상기 하나 이상의 작업 요청들에 대한 스케쥴링(scheduling) 또는 로드 밸런싱(load balancing) 등을 수행할 수 있다.
API(145)는, 예를 들면, 어플리케이션(147)이 커널(141) 또는 미들웨어(143)에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어(file control), 창 제어(window control), 영상 처리(image processing), 또는 문자 제어(character control) 등을 위한 적어도 하나의 인터페이스 또는 함수(function)(예: 명령어)를 포함할 수 있다.
입출력 인터페이스(150)는, 예를 들면, 사용자 또는 다른 외부 기기로부터 입력된 명령 또는 데이터를 전자 장치(101)의 다른 구성요소(들)에 전달할 수 있는 인터페이스의 역할을 할 수 있다. 또한, 입출력 인터페이스(150)는 전자 장치(101)의 다른 구성요소(들)로부터 수신된 명령 또는 데이터를 사용자 또는 다른 외부 기기로 출력할 수 있다.
디스플레이(160)는, 예를 들면, 액정 디스플레이(liquid crystal display(LCD)), 발광 다이오드(light-emitting diode(LED)) 디스플레이, 유기 발광 다이오드(organic light-emitting diode(OLED)) 디스플레이, 또는 마이크로 전자기계 시스템(microelectromechanical systems(MEMS)) 디스플레이, 또는 전자종이(electronic paper) 디스플레이를 포함할 수 있다. 디스플레이(160)는, 예를 들면, 사용자에게 각종 콘텐츠(예: 텍스트(text), 이미지(image), 비디오(video), 아이콘(icon), 또는 심볼(symbol) 등)을 표시할 수 있다. 디스플레이(160)는, 터치 스크린(touch screen)을 포함할 수 있으며, 예를 들면, 전자 펜 또는 사용자의 신체의 일부를 이용한 터치(touch), 제스처(gesture), 근접(proximity), 또는 호버링(hovering) 입력을 수신할 수 있다.
통신 인터페이스(170)는, 예를 들면, 전자 장치(101)와 외부 장치(예: 제1 외부 전자 장치(102), 제2 외부 전자 장치(104), 또는 서버(106)) 간의 통신을 설정할 수 있다. 예를 들면, 통신 인터페이스(170)는 무선 통신 또는 유선 통신을 통해서 네트워크(162)에 연결되어 외부 장치(예: 제2 외부 전자 장치(104) 또는 서버(106))와 통신할 수 있다.
무선 통신은, 예를 들면, 셀룰러 통신 프로토콜로서, 예를 들면, LTE(long-term evolution), LTE-A(LTE Advance), CDMA(code division multiple access), WCDMA(wideband CDMA), UMTS(universal mobile telecommunications system), WiBro(Wireless Broadband), 또는 GSM(global system for mobile communications) 등 중 적어도 하나를 사용할 수 있다. 또한, 무선 통신은, 예를 들면, 근거리 통신(164)을 포함할 수 있다. 근거리 통신(164)은, 예를 들면, WiFi(wireless fidelity), 블루투스(Bluetooth), NFC(near field communication), 또는 GNSS(global navigation satellite system) 등 중 적어도 하나를 포함할 수 있다. GNSS는 사용 지역 또는 대역폭 등에 따라, 예를 들면, GPS(global positioning system), Glonass(global navigation satellite system), Beidou Navigation satellite system(이하, "Beidou") 또는 Galileo, the European global satellite-based navigation system 중 적어도 하나를 포함할 수 있다. 이하, 본 문서에서는, "GPS"는 "GNSS"와 혼용되어 사용(interchangeably used)될 수 있다. 유선 통신은, 예를 들면, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232), 또는 POTS(plain old telephone service) 등 중 적어도 하나를 포함할 수 있다. 네트워크(162)는 통신 네트워크(telecommunications network), 예를 들면, 컴퓨터 네트워크(computer network)(예: LAN 또는 WAN), 인터넷, 또는 전화 네트워크(telephone network) 중 적어도 하나를 포함할 수 있다.
프로세서(120)는, 중앙처리장치(central processing unit(CPU)), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다. 프로세서(120)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다.
특히, 프로세서(120)는 메모리(130)로부터 사진을 독출하고, 가중치에 기초하여 사진을 1차 선별하며, 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정하고, 제 1 속성 정보 및 제 2 속성 정보를 데이터베이스 형태로 메모리(130)에 저장하고, 제 1 속성 정보, 제 2 속성 정보 및 사용자 컨텍스트 정보에 기초하여 1 차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별하고, 2차 선별된 사진에 대응하는 상품 이미지를 서버(106)로부터 수신하도록 통신 인터페이스(170)를 제어하고, 2차 선별된 사진과 상품이미지를 합성하여 합성 이미지를 생성할 수 있다.
구체적으로, 프로세서(120)는 가중치에 기초하여 사진을 1차 선별할 수 있다(S1201). 가중치는 사진이 생성된 날짜에 기초하여 결정될 수 있다. 프로세서(120) 는 사진에 포함된 날짜 정보를 오늘 날짜와 비교하고, 비교 결과 사진 생성 날짜가 소정 기간보다 큰 경우에는 오래된 사진으로 결정하고 사진의 가중치를 낮출 수 있다. 또한, 프로세서(120)는 사진에 포함된 객체의 모습에 기초하여 가중치를 결정할 수 있다. 사진에 포함된 객체는 사용자일 수 있으며, 객체의 모습은 정면, 옆면, 뒷면으로 구분될 수 있다. 프로세서(120)는 사진을 분석하여 객체의 모습이 정면 또는 옆면 또는 뒷면인지 결정할 수 있다. 프로세서(120)는 객체의 모습이 정면으로 결정되는 경우에는 사진의 가중치를 높일 수 있다. 또한, 프로세서(120)는 사진의 공유여부에 기초하여 가중치를 결정할 수 있다. 사용자가 사진을 공유하면, 공유 정보가 사진에 저장될 수 있다. 공유 정보에는 공유한 날짜, 공유한 주소, 공유를 위해 사용했던 어플리케이션의 이름이 포함될 수 있다. 프로세서(120)는 사진으로 공유 정보를 추출하여 사진의 공유여부를 결정할 수 있고, 공유가 된 사진의 가중치를 높일 수 있다. 프로세서(120)는 사용자 인터렉션에 기초하여 가중치를 결정할 수 있다. 사용자가 사진을 생성한 후 사진을 재생하면서 줌인 또는 줌아웃 동작을 하거나 또는 사진을 플릭하면, 사용자 인터렉션 정보가 사진에 저장될 수 있다. 프로세서(120)는 메모리(130)에 저장된 사진에서 사용자 인터렉션 정보를 추출하여 사진의 가중치를 결정할 수 있다. 사용자 인터렉션은 사진이 화면에 표시되는 동안 검출될 수 있다. 예를 들면, 프로세서(120)는 사진을 화면에 표시하도록 디스플레이(160)를 제어하고, 줌인 제스처를 취하면 사용자 인터렉션을 검출하고 검출된 사용자 인터렉션을 사진에 저장할 수 있다. 사용자 인터렉션이 줌인 제스처인 경우에는 사진의 가중치가 상승될 수 있다. 프로세서(120)는 상술한 바와 같은 방법으로 산출된 가중치가 소정 값 이상인 사진을 1차로 선별하고 피팅용 사진으로 사용할 수 있다.
프로세서(120)는 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정할 수 있다. 이때, 제 1 속성 정보는 사진에 포함된 객체에 대한 정보일 수 있다. 객체는 사용자이거나 또는 사용자가 착용하고 있는 옷 일 수 있다. 프로세서(120)는 사진을 분석하여 사용자를 식별하고 사용작 착용한 옷의 스타일, 색상, 브랜드, 사이즈 및 기타의 정보를 추출하여 객체에 대한 정보로 메모리(130)에 저장할 수 있다. 제 2 속성 정보는 사진의 배경에 대한 정보일 수 있다. 배경의 속성 정보는 사진의 배경위치, 날씨, 계절 또는 상황 등이 포함될 수 있다. 프로세서(120)는 제 1 속성 정보 및 상기 제 2 속성 정보를 데이터베이스 형태로 메모리(130)에 저장할 수 있다. 제 1 속성 정보 및 제 2 속성 정보는 구조화 되고 색인화 되어 저장될 수 있다.
프로세서(120)는 제 1 속성 정보, 제 2 속성 정보 및 사용자 컨텍스트(context) 정보에 기초하여 1차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별할 수 있다. 사용자 컨텍스트 정보는 사용자의 위치 정보를 포함할 수 있다. 또한 사용자 컨텍스트 정보는 사용자의 동작 상태에 대한 정보를 포함할 수 있다. 예컨대 컨텍스트 정보는 사용자가 쇼핑중인지 또는 취침중인지 또는 출근중인지 또는 식사중인지를 나타낼 수 있다.
프로세서(120)는 2차 선별된 사진에 대응하는 상품 이미지를 서버(106)로부터 수신하도록 통신 인터페이스(170)를 제어할 수 있다. 2차 선별된 사진은 합성 이미지를 생성하기 위해 사용될 수 있다. 상품 이미지는 예컨대 제 3 자가 제공하는 옷 이미지일 수 있다. 상품 이미지는 전자장치(101)에서 제공하는 피팅용 사진 정보에 기초하여 선별될 수 있다. 프로세서(120)는 사용자가 특정 장소에 위치하거나 또는 특정 행동을 하는 경우 사용자의 컨텍스트에 대응하는 피팅용 사진을 선별하고 피팅용 사진의 속성 정보를 서버(106) 또는 디스플레이 장치(102)에 제공할 수 있다.
프로세서(120)는 2차 선별된 사진과 상품 이미지를 합성하여 합성 이미지를 생성할 수 있다. 이때, 프로세서(120)가 합성 이미지를 생성할 수 있으나, 이는 일 실시예에 불과할 뿐, 외부의 서버(106) 또는 디스플레이 장치(102)가 합성 이미지를 생성할 수 있다.
프로세서(120)는 합성 이미지를 표시하도록 디스플레이(160)를 제어할 수 있다. 이때, 프로세서(120)는 상품 이미지를 함께 표시하도록 디스플레이(160)를 제어할 수 있다.
외부 전자 장치(104)는 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 한 실시예에 따르면, 서버(106)는 하나 또는 그 이상의 서버들의 그룹을 포함할 수 있다. 다양한 실시예들에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 전자 장치(예: 전자 장치(104), 또는 서버(106))에서 실행될 수 있다. 한 실시예에 따르면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 다른 장치(예: 전자 장치(104), 또는 서버(106))에게 요청할 수 있다. 다른 전자 장치(예: 전자 장치(104), 또는 서버(106))는 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 수신된 결과를 그대로 또는 추가적으로 처리하여 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅(cloud computing), 분산 컴퓨팅(distributed computing), 또는 클라이언트-서버 컴퓨팅(client-server computing) 기술이 이용될 수 있다.
디스플레이 장치(102)는 예컨대 LFD(Large Flat Display)일 수 있다. LFD는 전자 장치(101)의 통신 인터페이스(170)를 통해 전자장치(101)와 통신할 수 있다. 디스플레이 장치(102)는 네트워크(162)를 통해 서버(106)와 통신할 수 있다.
도 2는 본 발명의 일 실시 예에 따른 전자 장치의 블록도이다.
전자 장치(201)는, 예를 들면, 도 1에 도시된 전자 장치(101)의 전체 또는 일부를 포함할 수 있다. 전자 장치(201)는 하나 이상의 프로세서(예: AP(application processor))(210), 통신 모듈(220), 가입자 식별 모듈(224), 메모리(230), 센서 모듈(240), 입력 장치(250), 디스플레이(260), 인터페이스(270), 오디오 모듈(280), 카메라 모듈(291), 전력 관리 모듈(295), 배터리(296), 인디케이터(297), 및 모터(298)를 포함할 수 있다.
프로세서(210)는, 예를 들면, 운영 체제 또는 어플리케이션 프로그램을 구동하여 프로세서(210)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 프로세서(210)는, 예를 들면, SoC(system on chip)로 구현될 수 있다. 한 실시예에 따르면, 프로세서(210)는 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서(image signal processor)를 더 포함할 수 있다. 프로세서(210)는 도 2에 도시된 구성 요소들 중 적어도 일부(예: 셀룰러 모듈(221))를 포함할 수도 있다. 프로세서(210)는 다른 구성요소들(예: 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리하고, 다양한 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
통신 모듈(220)은, 도 1의 통신 인터페이스(170)와 동일 또는 유사한 구성을 가질 수 있다. 통신 모듈(220)은, 예를 들면, 셀룰러 모듈(221), WiFi 모듈(223), 블루투스 모듈(225), GNSS 모듈(227)(예: GPS 모듈, Glonass 모듈, Beidou 모듈, 또는 Galileo 모듈), NFC 모듈(228) 및 RF(radio frequency) 모듈(229)을 포함할 수 있다.
셀룰러 모듈(221)은, 예를 들면, 통신 네트워크를 통해서 음성 통화, 영상 통화, 문자 서비스, 또는 인터넷 서비스 등을 제공할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(221)은 가입자 식별 모듈(예: SIM(subscriber identification module) 카드)(224)를 이용하여 통신 네트워크 내에서 전자 장치(201)의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(221)은 프로세서(210)이 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(221)은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다.
WiFi 모듈(223), 블루투스 모듈(225), GNSS 모듈(227) 또는 NFC 모듈(228) 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 어떤 실시예에 따르면, 셀룰러 모듈(221), WiFi 모듈(223), 블루투스 모듈(225), GNSS 모듈(227) 또는 NFC 모듈(228) 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다.
RF 모듈(229)은, 예를 들면, 통신 신호(예: RF 신호)를 송수신할 수 있다. RF 모듈(229)은, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter), LNA(low noise amplifier), 또는 안테나(antenna) 등을 포함할 수 있다. 다른 실시예에 따르면, 셀룰러 모듈(221), WiFi 모듈(223), 블루투스 모듈(225), GNSS 모듈(227) 또는 NFC 모듈(228) 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호를 송수신할 수 있다.
가입자 식별 모듈(224)은, 예를 들면, 가입자 식별 모듈을 포함하는 카드 및/또는 내장 SIM(embedded SIM)을 포함할 수 있으며, 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
메모리(230)(예: 메모리(130))은, 예를 들면, 내장 메모리(232) 또는 외장 메모리(234)를 포함할 수 있다. 내장 메모리(232)는, 예를 들면, 휘발성 메모리(volatile memory)(예: DRAM(dynamic RAM(random access memory)), SRAM(static RAM), 또는 SDRAM(synchronous dynamic RAM) 등), 비휘발성 메모리(non-volatile memory)(예: OTPROM(one time programmable ROM(read only memory)), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, 플래시 메모리(예: NAND flash 또는 NOR flash 등), 하드 드라이브, 또는 솔리드 스테이트 드라이브(solid state drive(SSD)) 중 적어도 하나를 포함할 수 있다.
외장 메모리(234)는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital), MMC(MultiMediaCard) 또는 메모리 스틱(memory stick) 등을 더 포함할 수 있다. 외장 메모리(234)는 다양한 인터페이스를 통하여 전자 장치(201)와 기능적으로 및/또는 물리적으로 연결될 수 있다.
센서 모듈(240)은, 예를 들면, 물리량을 계측하거나 전자 장치(201)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서 모듈(240)은, 예를 들면, 제스처 센서(gesture sensor)(240A), 자이로 센서(gyro sensor)(240B), 기압 센서(barometer)(240C), 마그네틱 센서(magnetic sensor)(240D), 가속도 센서(acceleration sensor)(240E), 그립 센서(grip sensor)(240F), 근접 센서(proximity sensor)(240G), 컬러 센서(color sensor)(240H)(예: RGB(red, green, blue) 센서), 생체 센서(medical sensor)(240I), 온/습도 센서(temperature-humidity sensor)(240J), 조도 센서(illuminance sensor)(240K), 또는 UV(ultra violet) 센서(240M), 초음파 센서(240N) 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로(additionally or alternatively), 센서 모듈(240)은, 예를 들면, 후각 센서(E-nose sensor), EMG 센서(electromyography sensor), EEG 센서(electroencephalogram sensor), ECG 센서(electrocardiogram sensor), IR(infrared) 센서, 홍채 센서(iris scan sensor) 및/또는 지문 센서(finger scan sensor)를 포함할 수 있다. 센서 모듈(240)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시예에서는, 전자 장치(201)는 프로세서(210)의 일부로서 또는 별도로, 센서 모듈(240)을 제어하도록 구성된 프로세서를 더 포함하여, 프로세서(210)가 슬립(sleep) 상태에 있는 동안, 센서 모듈(240)을 제어할 수 있다.
입력 장치(250)는, 예를 들면, 터치 패널(touch panel)(252), (디지털) 펜 센서(pen sensor)(254), 키(key)(256), 또는 초음파(ultrasonic) 입력 장치(258)를 포함할 수 있다. 터치 패널(252)은, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용할 수 있다. 또한, 터치 패널(252)은 제어 회로를 더 포함할 수도 있다. 터치 패널(252)은 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다.
(디지털) 펜 센서(254)는, 예를 들면, 터치 패널의 일부이거나, 별도의 인식용 쉬트(sheet)를 포함할 수 있다. 키(256)는, 예를 들면, 물리적인 버튼, 광학식 키, 또는 키패드(keypad)를 포함할 수 있다. 초음파 입력 장치(258)는 마이크(예: 마이크(288))를 통해, 입력 도구에서 발생된 초음파를 감지하여, 상기 감지된 초음파에 대응하는 데이터를 확인할 수도 있다.
디스플레이(260)는 패널(262), 홀로그램 장치(264), 또는 프로젝터(266)를 포함할 수 있다. 패널(262)은, 도 1의 디스플레이(160)와 동일 또는 유사한 구성을 포함할 수 있다. 패널(262)은, 예를 들면, 유연하게(flexible), 투명하게(transparent), 또는 착용할 수 있게(wearable) 구현될 수 있다. 패널(262)은 터치 패널(252)과 하나의 모듈로 구성될 수도 있다. 홀로그램 장치(264)는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 프로젝터(266)는 스크린(screen)에 빛을 투사하여 영상을 표시할 수 있다. 스크린은, 예를 들면, 전자 장치(201)의 내부 또는 외부에 위치할 수 있다. 한 실시예에 따르면, 디스플레이(260)는 패널(262), 홀로그램 장치(264), 또는 프로젝터(266)를 제어하기 위한 제어 회로를 더 포함할 수 있다.
인터페이스(270)는, 예를 들면, HDMI(high-definition multimedia interface)(272), USB(universal serial bus)(274), 광 인터페이스(optical interface)(276), 또는 D-sub(D-subminiature)(278)를 포함할 수 있다. 인터페이스(270)는, 예를 들면, 도 1에 도시된 통신 인터페이스(170)에 포함될 수 있다. 추가적으로 또는 대체적으로(additionally and alternatively), 인터페이스(270)는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure digital) 카드/MMC(multi-media card) 인터페이스, 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
오디오 모듈(280)은, 예를 들면, 소리(sound)와 전기 신호를 쌍방향으로 변환시킬 수 있다. 오디오 모듈(280)의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스(150)에 포함될 수 있다. 오디오 모듈(280)은, 예를 들면, 스피커(282), 리시버(284), 이어폰(286), 또는 마이크(288) 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
카메라 모듈(291)은, 예를 들면, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, ISP(image signal processor), 또는 플래시(flash)(예: LED 또는 xenon lamp 등)를 포함할 수 있다.
전력 관리 모듈(295)은, 예를 들면, 전자 장치(201)의 전력을 관리할 수 있다. 한 실시예에 따르면, 전력 관리 모듈(295)은 PMIC(power management integrated circuit), 충전 IC(charger integrated circuit), 또는 배터리(296) 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다. PMIC는, 유선 및/또는 무선 충전 방식을 가질 수 있다. 무선 충전 방식은, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등을 포함하며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 또는 정류기 등을 더 포함할 수 있다. 배터리 게이지는, 예를 들면, 배터리(296)의 잔량, 충전 중 전압, 전류, 또는 온도를 측정할 수 있다. 배터리(296)는, 예를 들면, 충전식 전지(rechargeable battery) 및/또는 태양 전지(solar battery)를 포함할 수 있다.
인디케이터(297)는 전자 장치(201) 또는 그 일부(예: 프로세서(210))의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 모터(298)는 전기적 신호를 기계적 진동으로 변환할 수 있고, 진동(vibration), 또는 햅틱(haptic) 효과 등을 발생시킬 수 있다. 도시되지는 않았으나, 전자 장치(201)는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 모바일 TV 지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting), 또는 미디어플로(mediaFloTM) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 문서에서 기술된 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 다양한 실시예에서, 전자 장치는 본 문서에서 기술된 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 다양한 실시예에 따른 전자 장치의 구성요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성요소들의 기능을 동일하게 수행할 수 있다.
도 3 은 본 발명의 개략적인 흐름도이다.
도 3 을 참조하면 전자장치(101)는 전자장치(101)에 저장된 복수의 사진을 분석하여 사용자의 취향 및 사진 속에서 사용자가 착용한 옷에 대한 브랜드를 식별할 수 있다. 전자장치(101)는 메모리에 저장된 복수의 사진을 사용자의 선호도에 기초하여 선별할 수 있다(301). 전자장치(101)가 사진을 선별하는 구체적인 방법에 대해서는 뒤에서 상세히 설명하기로 한다.
사진이 선별되면, 전자장치(101)는 선별된 사진을 분석하여 사진 배경에 대한 정보 및 사진에 포함된 옷에 대한 정보를 추출할 수 있다(302). 옷에 대한 정보는 예컨대 브랜드명, 옷의 색상 및 크기 정보일 수 있다. 사진에 포함된 옷 이미지는 사용자가 착용한 옷 이미지 및 타인이 착용한 옷 이미지일 수 있다.
전자장치(101)가 사진으로부터 추출한 사진 배경 정보 및 옷 정보는 메모리(130)에 저장될 수 있다. 예를 들면 사용자가 등산을 하면서 찍은 사진으로부터 전자장치(101)는 사진의 배경 정보가 '산' 인 것을 인식할 수 있다. 또한, 전자장치(101)는 사진 속에서 사용자가 착용하고 있는 옷의 브랜드명을 추출할 수 있다. 전자장치(101)는 사진으로부터 추출된 사진의 배경 및 사용자가 착용한 옷의 브랜드명을 사진에 포함시켜 저장하거나 또는 별도의 데이터 파일로 저장할 수 있다.
전자장치(101)는 상기와 같이 선별된 사진으로부터 사진 정보 및 옷에 대한 정보를 추출하고, 선별된 사진 및 사진에 배경 정보 및 옷에 대한 정보를 서버(106)로 전송할 수 있다.
서버(106)는 전자장치(101)에서 제공한 사진 정보 및 옷 정보에 기초하여 사진의 컨텍스트(context)를 결정하고, 컨텍스트에 대응하는 옷 정보를 검색하여 사용자에게 제공하거나, 또는 검색된 상품 이미지와 전자장치(101)가 제공한 사진을 합성하여 합성 이미지를 생성하고, 생성된 합성 이미지를 전자장치(101)로 전송하거나 또는 사용자가 위치한 곳에 배치된 디스플레이 장치(102)로 합성 이미지를 전송하여 표시할 수 있다(303). 또는, 전자장치(101)는 서버(106)로부터 전송된 상품 이미지와 전자장치(101)에 저장된 선별된 사진을 합성하여 합성 이미지를 생성하고 전자장치에 표시할 수 있다.
도 4는 전자장치(101)에 저장된 복수의 사진을 선별하는 과정을 설명하는 도면이다.
도 4 를 참조하면, 전자장치(101)는 메모리(130)에 저장된 사진에 가중치를 부여하고 가중치에 기초하여 사진을 선별할 수 있다. 본 문서에서 '사진'은 '사진을 형성하기 위한 데이터' 또는 '사진 파일'의 의미로 사용될 수 있다. 예컨대 메모리에 저장된 사진은 디스플레이에 표시되는 '사진을 형성하기 위한 데이터'의 의미로 사용될 수 있다.
전자장치(101)는 촬영한 날짜 및 시간에 기초하여 가중치를 부여할 수 있다. 예를 들면, 전자장치(101)는 최근에 촬영한 사진의 경우에는 가중치를 높게 할 수 있다(401).
전자장치(101)는 촬영한 사진을 분석하여 사진에 포함된 객체의 방향에 기초하여 사진의 가중치를 결정할 수 있다. 예를 들면, 사진에 포함된 객체의 방향이 정면인 경우에는 가중치를 높이고, 객체의 방향이 측면 또는 뒷면인 경우에는 가중치를 낮게 할 수 있다(402).
전자장치(101)는 촬영한 사진을 디스플레이(160)에 표시하는 동안 검출된 사용자의 인터렉션에 기초하여 사진의 가중치를 결정할 수 있다. 예를 들면 전자장치(101)는 사용자가 사진이 디스플레이(160)에 표시되는 동안 사용자가 줌인 제스처를 취한 경우에는 가중치를 높게 할 수 있다(403). 사진이 디스플레이(160)에 표시되는 동안 사용자가 줌인 제스처를 취하면, 전자장치(101)는 사용자가 해당 사진에 대해 관심이 있어 사진을 확대하는 것으로 판단하여 가중치를 높게 할 수 있다. 반면, 사진이 디스플레이(160)에 표시되는 동안 사용자가 플릭 제스처를 취하면, 전자장치(101)는 사용자가 해당 사진에 대해 관심이 없어 다른 사진으로 전환하는 것으로 판단하여 가중치를 낮게 할 수 있다.
전자장치(101)는 사진 공유 여부에 기초하여 가중치를 결정할 수 있다. 사용자가 사진을 공유하는 경우(예를 들어, 사진을 SNS에 업로드한 경우), 전자장치(101)는 가중치를 높게 설정할 수 있다(404). 예를 들어, 디스플레이(160)에 사진이 표시되는 동안 사용자가 공유 버튼을 누르는 경우, 전자장치(101)는 사진의 가중치를 높게 할 수 있다.
사진이 프로필 사진으로 사용되거나 또는 배경화면으로 사용되는 경우, 전자장치(101)는 사진의 가중치를 높게 설정할 수 있다(405).
전자장치(101)는 사진에 대한 액세스(access) 정보에 기초하여 가중치를 결정할 수 있다. 사용자가 사진을 액세스 하는 경우, 전자장치(101)는 사진에 대한 액세스 정보를 사진에 저장할 수 있다. 액세스 정보는 사용자가 사진에 액세스한 날짜 정보 일 수 있다. 전자장치(101)는 사용자가 사진을 액세스할 때마다 사진에 대한 액세스 정보를 업데이트할 수 있다. 전자장치(101)는 사진으로부터 액세스 정보를 추출하고 액세스 날짜가 미리 결정된 시간보다 오래된 경우에는 방치된 사진으로 인식하여 사진에 대한 가중치를 낮게 설정할 수 있다(411).
사진을 재생하는 동안 사용자가 플릭 제스처를 취하면, 전자장치(101)는 사용자가 해당 사진에 대해 관심이 없어 다른 사진으로 전환하는 것으로 판단하고 해당 사진에 대한 가중치를 낮게 설정할 수 있다(412).
전자장치(101)는 사진의 삭제 정보에 기초하여 가중치를 결정할 수 있다. 예를 들면, 전자장치(101)는 사용자가 촬영을 한 후 클라우드 서버로 전송될 수 있다. 이 후에, 전자장치(101)에서 사진이 삭제되는 경우, 전자 장치(101)는 해당 사진에 대한 가중치를 낮게 설정하고(413), 해당 사진에 대한 가중치 정보를 클라우드 서버로 전송 할 수 있다.
도 5 는 전자장치(101)가 서버(106)로부터 수신한 사진을 선별하는 과정을 설명하는 도면이다.
도 5 를 참조하면, 전자장치(101)는 서버(106)로부터 수신한 사진에 가중치를 부여하고 가중치에 기초하여 사진을 선별할 수 있다. 사용자가 유선 또는 무선 네트워크(162)을 통해 인터넷 서핑을 하는 경우, 전자장치(101)는 서버(106)로부터 사진을 수신할 수 있다. 예를 들면, 사용자가 인터넷 서핑을 통해 사진을 검색하는 경우, 전자장치(101)는 해당 서버로부터 사진을 수신할 수 있다.
전자장치(101)는 서버(106)로부터 수신한 사진에 대한 다운로드 여부에 기초하여 가중치를 결정할 수 있다. 예를 들면, 사용자가 온라인 쇼핑몰에 접속하여 상품을 검색하는 도중에 특정 사진을 다운로드 하는 경우, 전자장치(101)는 해당 사진에 대해 가중치를 높게 설정 할 수 있다(501).
전자장치(101)는 사용자의 스크린 캡쳐 동작에 기초하여 가중치를 결정할 수 있다. 예를 들면, 사용자가 인터넷 서핑을 하면서 특정 사진을 캡쳐하면, 전자장치(101)는 캡쳐된 사진에 대해 가중치를 높게 설정 할 수 있다(502).
전자장치(101)는 서버(106)로부터 수신한 사진에 대해 사용자의 인터렉션을 검출하고, 사용자의 인터렉션에 기초하여 가중치를 결정할 수 있다. 예를 들면 사용자가 인터넷 서핑을 하면서 특정 사진에 대해 줌인 제스처를 수행하는 경우, 전자장치(101)는 해당 사진에 대해 가중치를 높게 설정 할 수 있다(503).
전자장치(101)는 서버(106)로부터 수신한 사진이 화면에 표시되는 시간에 기초하여 가중치를 결정할 수 있다. 예를 들면, 사용자가 인터넷 서핑을 하면서 특정 사진을 미리 결정된 시간 이상 화면에 표시하는 경우, 전자장치(101)는 해당 사진에 대해 가중치를 높게 설정 할 수 있다(504).
전자장치(101)는 서버(106)로부터 수신한 사진에 대해 사용자의 SNS 공유여부에 기초하여 가중치를 결정할 수 있다. 예를 들면, 사용자가 인터넷 서핑을 하면서 특정 사진을 보는 동안 SNS 공유 버튼을 클릭하는 경우, 전자장치(101)는 해당 사진에 대해 가중치를 높게 설정 할 수 있다(505).
전자장치(101)는 서버(106)로부터 수신한 사진에 대해 사용자의 인터렉션을 검출하고 사용자의 인터렉션에 기초하여 가중치를 결정 할 수 있다. 예를 들면, 사용자가 인터넷 서핑을 하면서, 특정 사진이 화면에 표시된 상태에서 사용자가 백버튼(back button)을 클릭하는 경우, 전자장치(101)는 해당 사진에 대해 가중치를 낮게 설정 할 수 있다(511). 또는 사용자가 인터넷 서핑을 하면서, 화면에 표시된 사진에 대해 플릭 제스처를 수행하여 다른 사진으로 전환하는 경우, 전자장치(101)는 해당 사진에 대해 가중치를 낮게 설정 할 수 있다(512).
도 6 은 사용자에 의해 생성된 사진에 대해 가중치를 부여하는 방법에 대한흐름도이다.
도 6 을 참조하면, 전자 장치(101)는 메모리(130)로부터 하나의 사진을 독출한다. 사진은 전자장치(101)에 포함된 카메라를 통해 생성된 후 전자장치(101)의 메모리(130)에 저장되거나 또는 클라우드 서버에 저장된 것일 수 있다. 전자장치(101)는 독출된 사진이 최신 사진인지 판단할 수 있다(S601). 전자장치(101)는 사진으로부터 날짜 정보를 추출하고, 추출된 날짜 정보와 현재 날짜를 비교한다. 비교 결과 사진이 소정 날짜 이내에서 생성된 경우(S601-Y), 전자장치(101)는 사진이 최신 사진인 것으로 판단하고 사진의 가중치를 상승 시킬 수 있다(S602). 비교 결과 사진이 소정 날짜를 지나서 생성된 경우(S601-N), 전자장치(101)는 사진의 가중치를 저하 시킬 수 있다(S603).
전자장치(101)는 독출된 사진을 분석하고 사진에 포함된 객체가 정면을 향하는지 결정하여 정면 사진인지 여부를 판단할 수 있다(S604). 판단 결과 정면 사진으로 결정되면(S604-Y), 전자장치(101)는 사진의 가중치를 상승 시킬 수 있다(S605). 판단 결과 정면 사진이 아닌 것으로 결정되면(S604-N), 전자장치는 사진의 가중치를 저하 시킬 수 있다(S606).
전자장치(101)는 독출된 사진이 최근에 공유되었는지 여부를 판단할 수 있다(S607). 판단 결과 사진이 최근에 공유된 경우(S607-Y), 전자장치(1010)는 사진의 가중치를 상승 시킬 수 있다(S608). 사진이 최근에 공유되지 않은 것으로 결정되면(S607-N), 전자장치(101)는 사진의 가중치를 저하시킬 수 있다(S609). 사용자가 어떤 사진을 화면에 표시한 상태에서 SNS 앱을 실행시켜 사진을 공유하면, 해당 사진에 대한 공유 정보가 사진에 저장될 수 있다. 공유 정보에는 공유한 날짜, 시간, 공유를 하기 위해 실행시킨 어플리케이션의 이름이 포함될 수 있다. 전자장치(101)는 사진에 포함된 공유 정보를 분석하여 해당 사진의 공유 여부를 판단할 수 있다.
전자장치(101)는 사진이 디스플레이(160)에 표시되는 동안 사용자의 인터렉션을 검출하고 사용자의 인터렉션에 기초하여 사진의 가중치를 설정할 수 있다(S610). 전자장치(101)는 사진을 디스플레이(160)에 표시할 수 있다. 사진이 디스플레이(160)에 표시된 상태에서 사용자 인터렉션이 검출되면, 전자장치(101)는 검출된 인터렉션을 식별하고, 식별된 결과를 사진에 저장할 수 있다. 전자장치(101)는 사진에 포함된 인터렉션 정보를 독출하고, 인터렉션 정보가 '줌인'인 경우에는 사진의 가중치를 상승 시킬 수 있다(S611). 전자장치(101)는 사진에 포함된 인터렉션 정보가 '스와이프'인 경우에는 사진의 가중치를 저하 시킬 수 있다(S612).
도 7 은 서버(106)로부터 수신한 사진에 대해 가중치를 부여하는 방법에 대한 흐름도이다.
사용자가 유선 또는 무선 네트워크(162)를 통해 인터넷 서핑을 하는 경우, 전자장치(101)는 해당 서버(106)로부터 사진이 포함된 웹페이지를 수신할 수 있다. 예를 들면, 사용자가 인터넷 서핑을 통해 사진을 검색하는 경우, 전자장치(101)는 해당 서버(106)로부터 사진을 수신할 수 있다. 또한, 사용자가 이메일을 통해 판매자 또는 판매 싸이트로부터 사진을 제공 받는 경우, 전자장치(101)는 해당 서버(106)로부터 사진을 수신할 수 있다.
사용자가 인터넷에 접속하면, 전자장치(101)의 디스플레이(160)에는 웹페이지가 표시될 수 있다. 전자장치(101)는 디스플레이(160)에 웹페이지가 표시되는 동안 사용자가 사진을 다운로드 하는지 여부를 판단할 수 있다(S701). 사용자가 사진을 다운로드 하면(S701-Y), 전자장치(101)는 다운로드 된 사진에 대해 사용자가 생성한 사진(예컨대 사용자가 카메라로 촬영한 사진)을 선별하는 기준을 적용하여 사진을 선별할 수 있다(S703). 사용자가 생성한 사진을 선별하는 구체적인 방법에 대해서는 도 6 에서 상세히 설명하였으므로 설명을 생략한다. 사용자가 사진을 다운로드 하지 않은 경우(S701-N), 전자장치(101)는 디스플레이(160)에 표시된 사진을 사용자가 스크린 캡쳐했는지 여부를 판단할 수 있다(S702). 사용자가 사진을 스크린 캡쳐하면(S702-Y), 전자장치(101)는 스크린 캡쳐한 사진에 대해 사용자가 생성한 사진을 선별하는 기준을 적용하여 사진을 선별할 수 있다(S704). 사용자가 사진을 스크린 캡쳐하지 않은 경우(S702-N), 전자장치(101)는 해당 사진에 대해 최근 공유 여부를 판단할 수 있다(S705). 사진이 최근에 공유되지 않는 경우(S705-N), 전자장치(101)는 해당 사진의 가중치를 저하 시킬 수 있다(S707). 사진이 최근에 공유된 경우(S705-Y), 전자장치(101)는 해당 사진의 가중치를 상승 시킬 수 있다(S706).
전자장치(101)는 사진이 디스플레이(160)에 표시된 상태에서 사용자 인터렉션을 검출할 수 있다(S708). 사용자 인터렉션이 줌인 제스처인 경우, 전자장치(101)는 사진의 가중치를 상승 시킬 수 있다(S709). 사용자 인터렉션이 스와이프(swipe), 플릭(flick) 제스처 또는 백(back) 버튼인 경우, 전자장치(101)는 사진의 가중치를 저하 시킬 수 있다(S710).
도 8 은 선별된 사진으로부터 사진에 포함된 옷의 속성 정보 및 배경의 속성 정보를 추출하는 예를 도시한 도면이다.
본 문서에서는 사람이 착용하고 있는 옷을 예로 설명하지만, 사람이 착용할 수 있는 다른 물품(예를 들면 액세서리 및 웨어러블 장치)에도 동일하게 적용될 수 있다.
도 8을 참조하면 사진(801, 811, 821)이 도시되어 있다. 전자장치(101)는 사진(801, 811, 821)으로부터 사진(801, 811, 821)에 포함된 객체(사람)가 착용하고 있는 옷에 대한 속성 및 배경의 속성을 추출할 수 있다.
옷에 대한 속성 정보는 옷의 스타일, 색상, 브랜드, 사이즈 및 기타의 정보를 포함할 수 있다. 예를 들면 옷의 스타일 속성은 'Y셔츠', '정장'또는 '캐쥬얼'등이 포함될 수 있다. 옷의 사이즈 속성은 'M', 'L', 'XL'또는 'XXL' 등이 포함될 수 있다.
배경의 속성 정보는 사진의 배경위치, 날씨, 계절 또는 상황 등이 포함될 수 있다. 예를 들면 사진의 배경위치 속성은 '산', '해변'또는 '도심'등이 포함될 수 있다. 날씨 속성은 '맑음','흐림','비'또는'눈'등이 포함될 수 있다. 계절 속성은 '봄', '여름', '가을' 또는 '겨울'등이 포함될 수 있다. 상황 속성은 '술자리', '결혼식', '등산', '운동'등이 포함될 수 있다.
전자장치(101)는 선별된 사진으로부터 옷 및 배경에 대한 속성 정보를 추출하여 데이터베이스 형태로 메모리(130) 또는 서버(106)에 속성 정보를 저장할 수 있다. 또는 추출된 속성 정보는 사진과 함께 저장될 수도 있다.
예를 들면, 전자장치(101)는 사진(801)을 분석하여 식별된 사용자가 착용하고 있는 옷의 색상이 '노랑'이며, 스타일은 '등산복'을 입고 있는 것으로 식별할 수 있다. 전자장치(101)는 옷의 속성 정보로 색상을 '노랑'으로 추출하고, 스타일을'등산복'으로 추출하여 추출된 옷의 속성 정보를 사진(801)에 저장하거나 또는 별도의 파일로 생성하여 전자장치(101) 또는 서버(106)에 저장할 수 있다. 또한, 전자장치(101)는 사진(801)을 분석하여 사진(801)의 배경위치는 '산'이고, 날씨는 '맑음', 상황은 '등산'으로 식별할 수 있다. 전자장치(101)는 사진(801)으로부터 사진의 배경에 대한 속성 정보로 '산', '맑음'및 '등산'을 추출하고, 추출된 배경의 속성 정보를 사진(801)에 저장하거나 또는 별도의 파일로 생성하여 전자장치(101) 또는 서버(106)에 저장할 수 있다.
전자장치(101)는 사진(811)을 분석하여 식별된 사용자가 착용하고 있는 옷의 색상이 '힌색' 이며, 스타일은 '웨딩 드레스'를 입고 있는 것으로 식별할 수 있다. 전자장치(101)는 옷의 속성 정보로 색상은 '흰색', 스타일은 '웨딩드레스'를 추출하고, 추출된 옷의 속성 정보를 사진(811)에 저장하거나 또는 별도의 파일로 생성하여 전자장치(101) 또는 서버(106)에 저장할 수 있다. 또한 전자장치(101)는 사진(811)을 분석하여 사진(811)의 배경위치는 '야외'이고, 날씨는 '맑음', 상황은 '결혼식'으로 식별할 수 있다. 전자장치는 사진(811)으로부터 사진의 배경에 대한 속성 정보로 '야외', '맑음'및 '결혼식'을 추출하고, 추출된 사진(811)의 속성 정보를 사진(811)에 저장하거나 또는 별도의 파일로 생성하여 전자장치(101) 또는 서버(106)에 저장할 수 있다.
전자장치(101)는 사진(821)을 분석하여 식별된 사용자가 착용하고 있는 옷의 색상이 '블루(blue)' 이며, 사이즈는 'M', 스타일은 'T셔츠'를 입고 있는 것으로 식별할 수 있다. 전자장치(101)는 옷의 속성 정보로 색상은'블루', 스타일은 'T셔츠', 사이즈는 'M'을 추출하고 추출된 옷의 속성 정보를 사진(821)에 저장하거나 또는 별도의 파일로 생성하여 전자장치(101) 또는 서버(106)에 저장할 수 있다. 또한 전자장치(101)는 사진(821)을 분석하여 사진(821)의 배경위치는 '해변'이고, 날씨는 '맑음', 상황은 '여행'으로 식별할 수 있다. 전자장치(101)는 사진(821)으로부터 사진 속성 정보로 배경위치는'야외', 날씨는'맑음', 상황은 '여행'을 추출하고 추출된 사진(821)의 배경에 대한 속성 정보를 사진(821)에 저장하거나 또는 별도의 파일로 생성하여 전자장치(101) 또는 서버9106)에 저장할 수 있다.
전자장치(101)는 저장된 배경의 속성 정보 및 옷의 속성 정보를 조합하여 가상의 테이블(831)을 만들고, 가상의 테이블로부터 사용자가 좋아하는 옷의 브랜드, 크기, 색상등을 판단할 수 있다.
도 9는 사진의 속성 정보를 활용하여 사용자가 선호하는 옷을 추천하는 예를 도시한 도면이다.
도 9 를 참조하면, 매장에 배치된 디스플레이 장치(901)가 도시되어 있다. 디스플레이 장치(901)는 예컨대 LFD일 수 있다. 사용자가 매장에서 옷을 선택하고 옷을 디스플레이 장치(901)에 태그(tag)(903)하면, 디스플레이 장치(901)에는 사용자가 선택한 옷의 이미지(902)가 표시될 수 있다.
또는, 전자장치(905)는 메모리에 저장된 옷의 속성 정보를 디스플레이 장치(901)로 애드버타이즈(advertise)하고, 디스플레이 장치(901)는 전자장치(905)가 애드버타이즈(advertise)한 옷의 속성 정보를 수신하고 옷의 속성 정보에 기초하여 사용자가 선호하는 옷을 검색하고, 검색된 옷에 대응하는 이미지(902)를 표시할 수 있다.
또는, 전자장치(905)는 근접 통신(예컨대 NFC, WiFi)을 이용하여 전자장치(905)에 피팅용으로 선별되어 저장된 사진을 디스플레이 장치(901)로 전송할 수 있으며, 디스플레이 장치(901)는 사용자가 선택한 옷에 대한 이미지와 전자장치(905)로부터 전송 받은 피팅용 사진을 합성하여 합성 이미지를 생성하고, 생성된 합성 이미지(906, 907)를 표시할 수 있다.
도 10 은 사용자가 생성한 사진에 제 3 자가 제공한 상품 이미지를 합성하여 사용자에게 제공하는 예를 설명하기 위한 도면이다.
도 10 을 참조하면, 전자장치(1001), 클라우드 서버(1002), 사진 분석 서버(1003), 디스플레이 장치(1004) 및 전자장치(1005)가 도시되어 있다. 전자장치(1001) 및 전자장치(1005)는 동일한 전자장치이며 예컨대 사용자가 휴대한 스마트폰일 수 있다. 전자장치(1001)는 가중치를 기준으로 선별된 사진을 피팅(Fitting)용 사진으로 결정할 수 있다. 피팅용 사진에는 옷 및 배경에 대한 속성 정보가 저장될 수 있다. 전자장치(1001)는 선별된 피팅용 사진을 클라우드 서버(1002)로 전송할 수 있다. 피팅용 사진은 자동으로 클라우드 서버(1002)로 전송될 수 있다. 클라우드 서버(1002)는 전자장치(1001)로부터 전송 받은 피팅용 사진을 저장할 수 있다. 클라우드 서버(1002)는 피팅용 사진을 사진 분석 서버(1003)으로 전송할 수 있다. 사진 분석 서버(1003)는 클라우드 서버(1002)로부터 전송 받은 피팅용 사진을 분석하여 사진의 컨텍스트를 결정할 수 있다. 사진의 컨텍스트는 사진에 포함된 옷 및 사진 속성을 조합하여 결정될 수 있다. 사진 분석 서버(1003)는 제 3 자(예컨대 옷 판매자)가 제공하는 서버일 수 있다. 어떤 실시예에서는 클라우드 서버(1002)가 사진 분석 서버(1003)를 겸할 수 있다. 사진 분석 서버(1003)에서 피팅용 사진의 컨텍스트가 결정되면, 사진 분석 서버(1003)는 사진의 컨텍스트에 대응하는 옷의 이미지를 검색하고, 피팅용 사진과 검색된 옷의 이미지를 합성하여 합성 이미지를 생성할 수 있다. 사진 분석 서버(1003)는 합성 이미지를 디스플레이 장치(1004) 및 사용자의 전자장치(1005)로 전송할 수 있다. 사진 분석 서버(1003)는 디스플레이 장치(1004)의 요청에 의해 합성 이미지를 디스플레이 장치(1004)로 전송할 수 있다. 사용자가 디스플레이 장치(1004)에 근접하면, 디스플레이 장치(1004)는 사진 분석 서버(1003)에 합성 이미지를 요청하고 사진 분석 서버(1003)로부터 전송 받은 합성 이미지를 표시할 수 있다. 또는, 사진 분석 서버(1003)는 사용자의 위치정보에 기초하여 합성 이미지를 사용자의 전자장치(1005)로 전송할 수 있다. 전자장치(1005)는 합성이미지를 수신하여 디스플레이에 표시할 수 있다.
예를 들면, 사용자가 스마트폰을 소지한 상태에서 제 3 자의 매장에 들어오면, 디스플레이 장치(1004)는 사용자의 스마트폰에서 BLE를 통해 애드버타이즈되는 사용자의 정보를 수신하고 사용자를 식별할 수 있다. 디스플레이 장치(1004)에서 사용자를 식별하면, 디스플레이 장치(1004)는 사용자에 대응하는 합성 이미지를 사진 분석 서버(1003)에 요청하고 합성 이미지를 수신하여 디스플레이 장치(1004)에 표시할 수 있다. 또는, 디스플레이 장치(1004)가 사용자의 위치 정보를 수신하여 사진 분석 서버(1003)으로 전송하면, 사진 분석 서버(1003)는 사용자에 대응하는 합성 이미지를 사용자의 스마트폰(1005)으로 전송할 수 있다. 또는, 사진 분석 서버(1003)가 사용자의 스마트폰(1005)으로부터 위치 정보를 수신하고 사용자가 매장에 들어온 것으로 인식되면, 사진 분석 서버(1003)는 사용자의 스마트폰(1005)으로 사용자에 대응하는 합성 이미지를 전송 할 수 있다.
도 11 은 전자장치에 저장된 피팅용 사진에 상품 이미지를 합성하는 과정을 설명하는 도면이다.
도 11 을 참조하면, 전자장치(1101)는 가중치에 기초하여 선별된 사진을 피팅용 사진으로 결정할 수 있다. 피팅용 사진에는 옷 및 배경의 속성정보가 포함될 수 있다. 또는 옷 및 배경의 속성정보는 별도의 데이터베이스 파일로 메모리에 저장될 수 있으며, 검색이 가능할 수 있다. 전자장치(1101)는 사용자의 위치 정보에 기초하여 메모리에 저장된 피팅용 사진을 검색할 수 있다. 예를 들면 사용자가 등산복 매장에 있는 경우, 전자장치(1101)는 위치 정보에 기초하여 사용자의 현재 위치가 등산복 매장인 것으로 결정하고, 메모리에 저장된 피팅용 사진중에서 등산복 속성을 갖는 사진을 검색할 수 있다.
전자장치(1101)는 현재의 날씨 정보에 기초하여 메모리에 저장된 피팅용 사진을 검색할 수 있다. 예를 들면, 전자장치(1101)는 현재 날씨가 맑은 경우에는 메모리에 저장된 피팅용 사진중에서'맑음' 속성을 갖는 사진을 검색할 수 있다.
전자장치(1101)는 현재의 계절 정보에 기초하여 메모리에 저장된 피팅용 사진을 검색할 수 있다. 예를 들면, 현재 계절이 가을인 경우, 전자장치(1101)는 메모리에 저장된 피팅용 사진중에서 '가을' 속성을 갖는 사진을 검색할 수 있다. 전자장치(1101)는 검색된 사진 이미지(1102)를 디스플레이에 표시할 수 있다.
사용자가 등산복 매장에 있는 경우, 전자장치(1101)는 서버로부터 매장 안의 브랜드에 대응하는 광고 콘텐트(1103)를 수신할 수 있다. 광고 콘텐트(1103)는 예컨대 상품 이미지일 수 있다. 예를 들면 사용자가 K브랜드 매장에 있는 경우, 전자장치(1101)는 K브랜드의 광고 콘텐트(1103)를 서버로부터 수신할 수 있다.
서버로부터 광고 콘텐트(1103)를 수신하면, 전자장치(1101)는 검색된 사진 이미지(1102)에 광고 콘텐트(1103)를 합성하여 합성 이미지(1105)를 생성할 수 있다. 예를 들면, 검색된 이미지에 포함된 객체(1104)가 노란색 등산복을 입고 있다면, 전자장치(1101)는 서버로부터 수신된 광고 콘텐트(1103)를 검색된 이미지에 합성하여 초록색 등산복을 입는 객체(1105)로 변경시켜 합성 이미지를 생성 할 수 있다. 전자장치(1101)는 생성된 합성 이미지(1108)를 디스플레이에 표시할 수 있다.
전자장치(1101)는 서버로부터 수신된 광고 콘텐트(1109)를 표시할 수 있다. 예를 들면, 전자장치(1101)는 디스플레이에 합성 이미지(1108)를 표시하면서 광고 콘텐트(1109)를 중첩하여 표시할 수 있다. 또는 전자장치(1101)는 광고 콘텐트(1109)를 별도로 디스플레이(예를 들어, 디스플레이 장치)에 표시할 수 있다.
도 12 는 본 발명의 일 실시예에 따른 전자장치에서 피팅용 사진에 상품 이미지를 합성하는 과정을 설명하는 흐름도이다.
도 12 를 참조하면, 전자장치(101)는 가중치에 기초하여 사진을 1차 선별할 수 있다(S1201). 가중치는 사진이 생성된 날짜에 기초하여 결정될 수 있다. 전자장치(101)는 사진에 포함된 날짜 정보를 오늘 날짜와 비교하고, 비교 결과 사진 생성 날짜가 소정 기간보다 큰 경우에는 오래된 사진으로 결정하고 사진의 가중치를 낮출 수 있다.
또한 가중치는 사진에 포함된 객체의 모습에 기초하여 결정될 수 있다. 사진에 포함된 객체는 사용자일 수 있으며, 객체의 모습은 정면, 옆면, 뒷면으로 구분될 수 있다. 전자장치(101)는 사진을 분석하여 객체의 모습이 정면 또는 옆면 또는 뒷면인지 결정할 수 있다. 전자장치(101)는 객체의 모습이 정면으로 결정되는 경우에는 사진의 가중치를 높일 수 있다.
또한 가중치는 사진의 공유여부에 기초하여 결정될 수 있다. 사용자가 사진을 공유하면 공유 정보가 사진에 저장될 수 있다. 공유 정보에는 공유한 날짜, 공유한 주소, 공유를 위해 사용했던 앱의 이름이 포함될 수 있다. 전자장치(101)는 사진으로 공유 정보를 추출하여 사진의 공유여부를 결정할 수 있고, 공유가 된 사진의 가중치를 높일 수 있다.
사진의 가중치는 사용자 인터렉션에 기초하여 결정될 수 있다. 사용자가 사진을 생성한 후 사진을 재생하면서 줌인 또는 줌아웃 동작을 하거나 또는 사진을 플릭하면, 사용자 인터렉션 정보가 사진에 저장될 수 있다. 전자장치(101)는 메모리(130)에 저장된 사진에서 사용자 인터렉션 정보를 추출하여 사진의 가중치를 결정할 수 있다. 사용자 인터렉션은 사진이 화면에 표시되는 동안 검출될 수 있다. 예를 들면, 전자장치(101)는 사용자가 사진을 보기 위해 화면에 표시하고, 줌인 제스처를 취하면 사용자 인터렉션을 검출하고 검출된 사용자 인터렉션을 사진에 저장할 수 있다. 사용자 인터렉션이 줌인 제스처인 경우에는 사진의 가중치가 상승될 수 있다. 전자 장치(101)는 상술한 바와 같은 방법으로 산출된 가중치가 소정 값 이상인 사진을 1차로 선별하고 피팅용 사진으로 사용할 수 있다.
전자장치(101)는 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정할 수 있다(S1202). 사진의 제 1 속성 정보는 사진에 포함된 객체에 대한 정보일 수 있다. 객체는 사용자이거나 또는 사용자가 착용하고 있는 옷 일 수 있다. 전자장치(101)는 사진을 분석하여 사용자를 식별하고 사용자가 착용한 옷의 스타일, 색상, 브랜드, 사이즈 및 기타의 정보를 추출할 수 있다. 예를 들면 옷의 스타일 속성은 'Y셔츠', '정장'또는 '캐쥬얼'등이 포함될 수 있다. 옷의 사이즈 속성은 'M', 'L', 'XL'또는 'XXL' 등이 포함될 수 있다. 사진의 제 2 속성 정보는 사진의 배경에 대한 정보일 수 있다. 배경의 속성 정보는 사진의 배경위치, 날씨, 계절 또는 상황 등이 포함될 수 있다. 예를 들면 사진의 배경위치 속성은 '산', '해변'또는 '도심'등이 포함될 수 있다. 날씨 속성은 '맑음','흐림','비'또는'눈' 등이 포함될 수 있다. 계절 속성은 '봄', '여름', '가을' 또는 '겨울'등이 포함될 수 있다. 상황 속성은 '술자리', '결혼식', '등산', '운동'등이 포함될 수 있다.
전자장치(101)는 제 1 속성 정보 및 상기 제 2 속성 정보를 데이터베이스 형태로 메모리(130)에 저장할 수 있다(S1203). 제 1 속성 정보 및 제 2 속성 정보는 구조화 되고 색인화 되어 저장됨으로써 검색이 가능하고 동일한 속성을 갖는 사진을 검색하고 클러스터링(clustering)할 수 있다.
전자장치(101)는 제 1 속성 정보, 상기 제 2 속성 정보 및 사용자 컨텍스트(context) 정보에 기초하여 1차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별할 수 있다(S1204). 사용자 컨텍스트 정보는 사용자의 위치 정보를 포함할 수 있다. 또한 사용자 컨텍스트 정보는 사용자의 동작 상태에 대한 정보를 포함할 수 있다. 예컨대 컨텍스트 정보는 사용자가 쇼핑중인지 또는 취침중인지 또는 출근중인지 또는 식사중인지를 나타낼 수 있다.
전자장치(101)는 2차 선별된 사진에 대응하는 상품 이미지를 서버(106)로부터 수신할 수 있다(S1205). 2차 선별된 사진은 합성 이미지를 생성하기 위해 사용될 수 있다.
상품 이미지는 예컨대 제 3 자가 제공하는 옷 이미지일 수 있다. 상품 이미지는 전자장치(101)에서 제공하는 피팅용 사진 정보에 기초하여 선별될 수 있다. 전자장치(101)는 사용자가 특정 장소에 위치하거나 또는 특정 행동을 하는 경우 사용자의 컨텍스트에 대응하는 피팅용 사진을 선별하고 피팅용 사진의 속성 정보를 서버(106) 또는 디스플레이 장치(102)에 제공할 수 있다.
전자장치(101)는 2차 선별된 사진과 상기 상품 이미지를 합성하여 합성 이미지를 생성할 수 있다(S1206). 합성 이미지를 생성하는 단계는 전자장치(101)에서 수행되거나 또는 서버(106)에서 수행되거나 또는 디스플레이 장치(102)에서 수행될 수 있다.
전자장치(101)는 생성된 합성 이미지를 전자장치에 표시할 수 있다. 또한 생성된 합성 이미지는 디스플레이 장치(102)에서 표시될 수도 있다.
이상과 같이 다양한 실시 예에 따른 전자 장치가 한정된 예시적 실시 예와 도면을 통해 설명되었으나, 다양한 실시 예에 따른 전자 장치는 상기의 예시적 실시 예에 한정되는 것은 아니며, 다양한 실시 예에 따른 전자 장치가 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 문서에 개시된 실시 예는 개시된, 기술 내용의 설명 및 이해를 위해 제시된 것이며, 본 문서에서 기재된 기술의 범위를 한정하는 것은 아니다. 따라서, 본 문서의 범위는, 본 문서의 기술적 사상에 근거한 모든 변경 또는 다양한 다른 실시 예를 포함하는 것으로 해석되어야 한다.
101, 104 : 전자장치
102 : 디스플레이 장치
106 : 서버

Claims (20)

  1. 가중치에 기초하여 사진을 1차 선별하는 단계;
    상기 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정하는 단계;
    상기 제 1 속성 정보 및 상기 제 2 속성 정보를 데이터베이스 형태로 메모리에 저장하는 단계;
    상기 제 1 속성 정보, 상기 제 2 속성 정보 및 사용자 컨텍스트(context) 정보에 기초하여 상기 1차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별 하는 단계;
    상기 2차 선별된 사진에 대응하는 상품 이미지를 서버로부터 수신하는 단계;
    상기 2차 선별된 사진과 상기 상품 이미지를 합성하여 합성 이미지를 생성하는 단계;를 포함하는 전자장치의 합성 이미지 생성 방법.
  2. 제 1 항에 있어서,
    상기 가중치는 사진이 생성된 날짜에 기초하여 결정되는 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  3. 제 1 항에 있어서,
    상기 가중치는 사진에 포함된 객체의 모습에 기초하여 결정되는 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  4. 제 1 항에 있어서,
    상기 가중치는 사진의 공유여부에 기초하여 결정되는 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  5. 제 1 항에 있어서,
    상기 가중치는 사용자 인터렉션에 기초하여 결정되는 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  6. 제 5 항에 있어서,
    상기 사용자 인터렉션은 사진이 화면에 표시되는 동안 검출되는 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  7. 제 6 항에 있어서,
    상기 방법은,
    상기 사용자 인터렉션이 줌인 제스처인 경우에는 상기 가중치를 상승 시키는 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  8. 제 1 항에 있어서,
    상기 제 1 속성 정보는 사진에 포함된 객체에 대한 정보인 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  9. 제 1 항에 있어서,
    상기 제 2 속성 정보는 사진의 배경에 대한 정보인 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  10. 제 1 항에 있어서,
    상기 사용자 컨텍스트 정보는 사용자의 위치 정보를 포함하는 것을 특징으로 하는 전자장치의 합성 이미지 생성 방법.
  11. 사진이 저장되어 있는 메모리;
    외부의 서버와 통신을 수행하는 통신 인터페이스;
    사용자 인터렉션을 감지하는 디스플레이; 및
    상기 메모리로부터 사진을 독출하고, 가중치에 기초하여 상기 사진을 1차 선별하고, 상기 1차 선별된 사진으로부터 제 1 속성 정보 및 제 2 속성 정보를 결정하고, 상기 제 1 속성 정보 및 상기 제 2 속성 정보를 데이터베이스 형태로 상기 메모리에 저장하고, 상기 제 1 속성 정보, 상기 제 2 속성 정보 및 사용자 컨텍스트 정보에 기초하여 상기 1 차 선별된 사진으로부터 적어도 하나의 사진을 2차 선별하고, 상기 2차 선별된 사진에 대응하는 상품 이미지를 서버로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 2차 선별된 사진과 상기 상품이미지를 합성하여 합성 이미지를 생성하는 프로세서;를 포함하는 전자장치.
  12. 제 11 항에 있어서,
    상기 가중치는 사진이 생성된 날짜에 기초하여 결정되는 것을 특징으로 하는 전자장치.
  13. 제 11 항에 있어서,
    상기 가중치는 사진에 포함된 객체의 모습에 기초하여 결정되는 것을 특징으로 하는 전자장치.
  14. 제 11 항에 있어서,
    상기 가중치는 사진의 공유여부에 기초하여 결정되는 것을 특징으로 하는 전자장치.
  15. 제 11 항에 있어서,
    상기 가중치는 사용자 인터렉션에 기초하여 결정되는 것을 특징으로 하는 전자장치.
  16. 제 15 항에 있어서,
    상기 사용자 인터렉션은 사진이 화면에 표시되는 동안 검출되는 것을 특징으로 하는 전자장치.
  17. 제 16 항에 있어서,
    상기 전자장치는,
    상기 사용자 인터렉션이 줌인 제스처인 경우에는 상기 가중치를 상승 시키는 것을 특징으로 하는 전자장치.
  18. 제 11 항에 있어서,
    상기 제 1 속성 정보는 사진에 포함된 객체에 대한 정보인 것을 특징으로 하는 전자장치.
  19. 제 11 항에 있어서,
    상기 제 2 속성 정보는 사진의 배경에 대한 정보인 것을 특징으로 하는 전자장치.
  20. 제 11 항에 있어서,
    상기 사용자 컨텍스트 정보는 사용자의 위치 정보를 포함하는 것을 특징으로 하는 전자장치.
KR1020160040268A 2016-04-01 2016-04-01 이미지 합성 방법 및 그 전자 장치 KR102140072B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020160040268A KR102140072B1 (ko) 2016-04-01 2016-04-01 이미지 합성 방법 및 그 전자 장치
US15/401,739 US10043260B2 (en) 2016-04-01 2017-01-09 Method for synthesizing image and an electronic device using the same
EP17775656.6A EP3366038A4 (en) 2016-04-01 2017-02-14 Method for synthesizing image and an electronic device using the same
PCT/KR2017/001607 WO2017171231A1 (en) 2016-04-01 2017-02-14 Method for synthesizing image and an electronic device using the same
CN201780017436.3A CN108781262B (zh) 2016-04-01 2017-02-14 用于合成图像的方法和使用该方法的电子装置
US16/026,687 US11145047B2 (en) 2016-04-01 2018-07-03 Method for synthesizing image and an electronic device using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160040268A KR102140072B1 (ko) 2016-04-01 2016-04-01 이미지 합성 방법 및 그 전자 장치

Publications (2)

Publication Number Publication Date
KR20170112743A KR20170112743A (ko) 2017-10-12
KR102140072B1 true KR102140072B1 (ko) 2020-07-31

Family

ID=59961143

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160040268A KR102140072B1 (ko) 2016-04-01 2016-04-01 이미지 합성 방법 및 그 전자 장치

Country Status (5)

Country Link
US (2) US10043260B2 (ko)
EP (1) EP3366038A4 (ko)
KR (1) KR102140072B1 (ko)
CN (1) CN108781262B (ko)
WO (1) WO2017171231A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107437269B (zh) * 2017-08-03 2021-10-08 北京小米移动软件有限公司 一种处理图片的方法及装置
KR102499399B1 (ko) * 2018-03-20 2023-02-14 삼성전자주식회사 Isp 업데이트를 알리는 전자 장치 및 그 동작 방법
US11049300B2 (en) * 2018-09-04 2021-06-29 Dish Network L.L.C. Devices, systems and methods for mini-banner content
WO2021020038A1 (ja) * 2019-07-26 2021-02-04 富士フイルム株式会社 超音波診断装置および超音波診断装置の制御方法
KR20210070623A (ko) * 2019-12-05 2021-06-15 엘지전자 주식회사 사용자의 관심사를 추출하는 인공 지능 장치 및 그 방법
CN112866764A (zh) * 2021-02-01 2021-05-28 上海酷量信息技术有限公司 一种广告素材自动制作***和方法
US20230104119A1 (en) * 2021-10-05 2023-04-06 Capital One Services, Llc Systems and methods for storing dynamic data

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001011886A1 (en) 1998-10-28 2001-02-15 Hi-Pic Ltd. Virtual dressing over the internet
US20160063588A1 (en) 2014-08-28 2016-03-03 Akshay Gadre Methods and systems for virtual fitting rooms or hybrid stores

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3856211B2 (ja) * 2001-12-14 2006-12-13 オムロンエンタテインメント株式会社 画像印刷装置および方法、プログラム
KR101151428B1 (ko) 2005-10-17 2012-06-01 에스케이플래닛 주식회사 이동통신망을 이용한 가상 의류 착용 서비스 제공 방법 및시스템
JP2008065413A (ja) 2006-09-05 2008-03-21 Tokyo Metropolitan Univ 移動通信体及び情報案内サーバ
US7725547B2 (en) * 2006-09-06 2010-05-25 International Business Machines Corporation Informing a user of gestures made by others out of the user's line of sight
JP5169111B2 (ja) 2007-09-28 2013-03-27 カシオ計算機株式会社 合成画像出力装置および合成画像出力処理プログラム
US10872322B2 (en) * 2008-03-21 2020-12-22 Dressbot, Inc. System and method for collaborative shopping, business and entertainment
KR20100026981A (ko) 2008-08-28 2010-03-10 이승운 의류 및 신체 장신구 착용의 실제 본인 모습 확인시스템 및 그 방법
US8274523B2 (en) * 2009-07-30 2012-09-25 Eastman Kodak Company Processing digital templates for image display
KR101626483B1 (ko) 2009-11-17 2016-06-13 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR101720774B1 (ko) * 2010-11-24 2017-03-28 삼성전자주식회사 디지털 촬영 장치 및 그의 사진 제공 방법
US20120136755A1 (en) 2010-11-29 2012-05-31 Yang Jin Seok System and Method for Providing Virtual Fitting Experience
KR20120078290A (ko) 2010-12-31 2012-07-10 주식회사 케이티 의류 착용 서비스 제공 방법 및 그 시스템
US9336442B2 (en) 2012-01-18 2016-05-10 Intellectual Ventures Fund 83 Llc Selecting images using relationship weights
WO2014034188A1 (ja) * 2012-08-30 2014-03-06 楽天株式会社 衣服画像処理装置、衣服画像表示方法、およびプログラム
US20140180873A1 (en) 2012-12-21 2014-06-26 Ebay Inc. Shopping by virtual fitting
US20140201023A1 (en) 2013-01-11 2014-07-17 Xiaofan Tang System and Method for Virtual Fitting and Consumer Interaction
KR20150044520A (ko) 2013-10-16 2015-04-27 한양대학교 에리카산학협력단 배경 인식모듈을 갖는 스마트 디스플레이
KR20150101488A (ko) 2014-02-26 2015-09-04 에스케이플래닛 주식회사 사물 인식에 기반한 광고를 제공하는 서비스 장치, 사물 인식에 기반한 광고를 수신하는 사용자 장치, 사물 인식에 기반한 광고를 제공하는 시스템, 방법 및 컴퓨터 프로그램이 기록된 기록매체
CN105072337B (zh) * 2015-07-31 2019-03-26 小米科技有限责任公司 图片处理方法及装置
CN106886538B (zh) * 2015-12-16 2021-06-08 阿里巴巴集团控股有限公司 提供业务对象信息的方法及装置
US10237740B2 (en) * 2016-10-27 2019-03-19 International Business Machines Corporation Smart management of mobile applications based on visual recognition

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001011886A1 (en) 1998-10-28 2001-02-15 Hi-Pic Ltd. Virtual dressing over the internet
US20160063588A1 (en) 2014-08-28 2016-03-03 Akshay Gadre Methods and systems for virtual fitting rooms or hybrid stores

Also Published As

Publication number Publication date
US20170287127A1 (en) 2017-10-05
US20180330491A1 (en) 2018-11-15
WO2017171231A1 (en) 2017-10-05
EP3366038A4 (en) 2018-10-24
US11145047B2 (en) 2021-10-12
CN108781262A (zh) 2018-11-09
US10043260B2 (en) 2018-08-07
KR20170112743A (ko) 2017-10-12
CN108781262B (zh) 2022-03-08
EP3366038A1 (en) 2018-08-29

Similar Documents

Publication Publication Date Title
KR102140072B1 (ko) 이미지 합성 방법 및 그 전자 장치
US10244177B2 (en) Method for processing image to generate relevant data based on user inputs and electronic device supporting the same
KR102276847B1 (ko) 가상 오브젝트 제공 방법 및 그 전자 장치
CN108664829B (zh) 用于提供与图像中对象有关的信息的设备
KR102252072B1 (ko) 음성 태그를 이용한 이미지 관리 방법 및 그 장치
CN105426035B (zh) 用于提供信息的方法和电子装置
US10075653B2 (en) Method and electronic device for image processing
US20160127653A1 (en) Electronic Device and Method for Providing Filter in Electronic Device
US20150317837A1 (en) Command displaying method and command displaying device
KR102220443B1 (ko) 깊이 정보를 활용하는 전자 장치 및 방법
US10786196B2 (en) Display apparatus and control method thereof for skin care analysis
EP2843529A1 (en) Method for providing information based on contents and electronic device thereof
KR20160047891A (ko) 영상을 처리하는 전자 장치 및 방법
WO2022048398A1 (zh) 多媒体数据拍摄方法及终端
KR20160088049A (ko) 이미지 분석 방법과 이를 수행하는 전자 장치 및 서버
KR102652362B1 (ko) 전자 장치 및 전자 장치 제어 방법
WO2019105457A1 (zh) 图像处理方法、计算机设备和计算机可读存储介质
US10216404B2 (en) Method of securing image data and electronic device adapted to the same
EP3608794B1 (en) Method for outputting content corresponding to object and electronic device therefor
CN111028071B (zh) 账单处理方法、装置、电子设备及存储介质
US10326936B2 (en) Method for providing images and electronic device supporting the same
KR20150141426A (ko) 전자 장치 및 전자 장치에서의 이미지 처리 방법
KR102316846B1 (ko) 미디어 컨텐츠를 선별하는 방법 및 이를 구현하는 전자장치
KR102133718B1 (ko) 바코드를 이용한 정보 제공 방법 및 장치
US20150310093A1 (en) Method of providing contents of an electronic device

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant