KR20230147649A - 이미지 처리 방법, 장치, 전자 기기 및 기억 매체 - Google Patents

이미지 처리 방법, 장치, 전자 기기 및 기억 매체 Download PDF

Info

Publication number
KR20230147649A
KR20230147649A KR1020237030354A KR20237030354A KR20230147649A KR 20230147649 A KR20230147649 A KR 20230147649A KR 1020237030354 A KR1020237030354 A KR 1020237030354A KR 20237030354 A KR20237030354 A KR 20237030354A KR 20230147649 A KR20230147649 A KR 20230147649A
Authority
KR
South Korea
Prior art keywords
image
target
color
fusion
face image
Prior art date
Application number
KR1020237030354A
Other languages
English (en)
Inventor
리우 수
Original Assignee
베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from CN202110204094.4A external-priority patent/CN112766234B/zh
Application filed by 베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드 filed Critical 베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드
Publication of KR20230147649A publication Critical patent/KR20230147649A/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G06F18/253—Fusion techniques of extracted features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G06T5/005—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/77—Retouching; Inpainting; Scratch removal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/62—Semi-transparency

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 것과, 상기 제2 대상 소재에 기초하여 상기 피처리 얼굴 이미지에서의 상기 대상 부위의 이미지 영역을 결정하는 것과, 상기 제2 대상 소재의 색에 기초하여 상기 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 것을 포함하는 이미지 처리 방법 및 장치, 전자 기기 및 기억 매체에 관한 것이다.

Description

이미지 처리 방법, 장치, 전자 기기 및 기억 매체
본원은 2021년 2월 23일에 중국 국가지식산권국에 제출된, 출원번호가 202110204094.4, 발명의 명칭이 「이미지 처리 방법 및 장치, 전자 기기 및 기억 매체」의 중국 특허출원의 우선권을 주장하고, 그 내용의 전부가 참조에 의해 본원에 포함된다.
본 발명은 컴퓨터 비전 기술에 관한 것으로, 특히 이미지 처리 방법 및 장치, 전자 기기 및 기억 매체에 관한 것이다.
뷰티 가공은 인체의 얼굴, 오관 및 기타 부위에 대해 렌더링, 드로잉 및 조정을 행함으로써 입체감을 보강하고, 형태나 색을 조정하여, 결함을 숨기고, 건강함을 표현함으로써 시각 효과를 미화한다는 목적을 달성할 수 있다. 컴퓨터 비전 기술의 발전에 따라 얼굴 이미지의 뷰티 가공은 사람들의 생활에 널리 사용되게 된다. 이 때문에, 어떻게 보다 자연스러운 뷰티 가공 효과를 얻을지는 현 시점에서 해결해야 할 문제가 된다.
본 발명은 이미지 처리의 기술적 해결 수단을 제공한다.
본 발명의 일 측면에 의하면,
피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 것과,
상기 제2 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 상기 대상 부위의 이미지 영역을 결정하는 것과,
상기 제2 대상 소재의 색에 기초하여, 상기 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 것을 포함하는 이미지 처리 방법을 제공한다.
가능한 일 실시형태에서는 상기 이미지 처리 방법은
상기 피처리 얼굴 이미지에서의 대상 부위를 식별하여 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 것을 추가로 포함하고,
상기한, 선택된 제1 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 것은
상기 선택된 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위를 융합시켜 표준 소재 이미지를 취득하는 것과,
상기 초기 위치에 기초하여 상기 표준 소재 이미지에서 제2 대상 소재를 추출하는 것을 포함한다.
가능한 일 실시형태에서는 상기한, 상기 피처리 얼굴 이미지에서의 대상 부위를 식별하여 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 것은
상기 피처리 얼굴 이미지에서 하나 이상의 얼굴 키포인트를 취득하는 것과,
상기 얼굴 키포인트에 기초하여, 상기 피처리 얼굴 이미지에서 상기 대상 부위에 대응하는 삼각 메시를 제작하는 것과,
상기 삼각 메시의 위치 좌표에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 결정하는 것을 포함한다.
가능한 일 실시형태에서는 상기한, 상기 제2 대상 소재에 기초하여 상기 피처리 얼굴 이미지에서의 상기 대상 부위의 이미지 영역을 결정하는 것은
상기 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것을 포함한다.
가능한 일 실시형태에서는 상기한, 상기 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것은
상기 제2 대상 소재의 화소점의 투명도가 미리 설정된 투명도 범위에 있는 경우, 상기 피처리 얼굴 이미지에서의 상기 화소점의 위치에 대응하는 영역을 상기 대상 부위의 이미지 영역으로서 결정하는 것을 포함한다.
가능한 일 실시형태에서는 상기한, 상기 제2 대상 소재의 색에 기초하여 상기 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여 융합 얼굴 이미지를 취득하는 것은
상기 대상 부위의 원색을 취득하는 것과,
상기 뷰티 가공 조작으로 선택된 처리 타입에 따라 상기 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 대상 부위의 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하는 것과,
상기 원색과 상기 초기 융합 색의 제2 융합 처리를 행하여 융합 얼굴 이미지를 취득하는 것을 포함한다.
가능한 일 실시형태에서는 상기 처리 타입은 아이 메이크업 처리, 치크 메이크업 처리 및 눈썹 메이크업 처리 중 하나 이상을 포함하고,
상기한, 상기 뷰티 가공 조작으로 선택된 처리 타입에 따라, 상기 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 초기 융합 얼굴 이미지를 취득하는 것은
상기 원색과 상기 제2 대상 소재의 색을 곱셈 모드로 융합시켜, 초기 융합 얼굴 이미지를 취득하는 것을 포함한다.
가능한 일 실시형태에서는 상기 처리 타입은 윤곽 수정 처리를 포함하고,
상기한, 상기 뷰티 가공 조작으로 선택된 처리 타입에 따라, 상기 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 초기 융합 얼굴 이미지를 취득하는 것은
상기 원색과 상기 제2 대상 소재의 색을 소프트 라이트 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것을 포함한다.
가능한 일 실시형태에서는 상기한, 상기 원색과 상기 초기 융합 색의 제2 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 것은
상기 제2 대상 소재의 하나 이상의 화소점의 투명도 및 미리 설정된 융합 강도에 기초하여, 상기 원색과 상기 초기 융합 색의 융합 가중치 각각을 결정하는 것과,
상기 원색과 상기 초기 융합 색을 각각의 상기 융합 가중치로 융합시켜, 융합 얼굴 이미지를 취득하는 것을 포함한다.
가능한 일 실시형태에서는 상기 제1 대상 소재는 속눈썹 소재, 아이라인 소재, 아이섀도 소재, 치크 소재, 눈썹 소재 및 얼굴 윤곽 수정 소재 중 하나 이상을 포함한다.
본 발명의 일 측면에 의하면,
피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 소재 생성 모듈과,
상기 제2 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 상기 대상 부위의 이미지 영역을 결정하는 대상 부위 결정 모듈과,
상기 제2 대상 소재의 색에 기초하여, 상기 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 융합 모듈을 구비하는 이미지 처리 장치를 제공한다.
가능한 일 실시형태에서는 상기 이미지 처리 장치는 추가로, 상기 피처리 얼굴 이미지에서의 대상 부위를 식별하여 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 것에 사용되고,
상기 소재 생성 모듈은
상기 선택된 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위를 융합시켜 표준 소재 이미지를 취득하는 것과,
상기 초기 위치에 기초하여 상기 표준 소재 이미지에서 제2 대상 소재를 추출하는 것에 사용된다.
가능한 일 실시형태에서는 상기 이미지 처리 장치는 추가로
상기 피처리 얼굴 이미지에서 하나 이상의 얼굴 키포인트를 취득하는 것과,
상기 얼굴 키포인트에 기초하여, 상기 피처리 얼굴 이미지에서 상기 대상 부위에 대응하는 삼각 메시를 제작하는 것과,
상기 삼각 메시의 위치 좌표에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 결정하는 것에 사용된다.
가능한 일 실시형태에서는 상기 대상 부위 결정 모듈은 상기 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여 상기 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것에 사용된다.
가능한 일 실시형태에서는 상기 대상 부위 결정 모듈은 추가로, 상기 제2 대상 소재의 화소점의 투명도가 미리 설정된 투명도 범위에 있는 경우, 상기 피처리 얼굴 이미지에서의 상기 화소점의 위치에 대응하는 영역을 상기 대상 부위의 이미지 영역으로서 결정하는 것에 사용된다.
가능한 일 실시형태에서는 상기 융합 모듈은
상기 대상 부위의 원색을 취득하는 것과,
상기 뷰티 가공 조작으로 선택된 처리 타입에 따라 상기 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 대상 부위의 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하는 것과,
상기 원색과 상기 초기 융합 색의 제2 융합 처리를 행하여 융합 얼굴 이미지를 취득하는 것에 사용된다.
가능한 일 실시형태에서는 상기 처리 타입은 아이 메이크업 처리, 치크 메이크업 처리 및 눈썹 메이크업 처리 중 하나 이상을 포함하고,
상기 융합 모듈은 추가로, 상기 원색과 상기 제2 대상 소재의 색을 곱셈 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것에 사용된다.
가능한 일 실시형태에서는 상기 처리 타입은 윤곽 수정 처리를 포함하고,
상기 융합 모듈은 추가로, 상기 원색과 상기 제2 대상 소재의 색을 소프트 라이트 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것에 사용된다.
가능한 일 실시형태에서는 상기 융합 모듈은 추가로,
상기 제2 대상 소재의 하나 이상의 화소점의 투명도 및 미리 설정된 융합 강도에 기초하여, 상기 원색과 상기 초기 융합 색의 융합 가중치 각각을 결정하는 것과,
상기 원색과 상기 초기 융합 색을 각각의 상기 융합 가중치로 융합시켜 융합 얼굴 이미지를 취득하는 것에 사용된다.
가능한 일 실시형태에서는 상기 제1 대상 소재는 속눈썹 소재, 아이라인 소재, 아이섀도 소재, 치크 소재, 눈썹 소재 및 얼굴 윤곽 수정 소재 중 하나 이상을 포함한다.
본 발명의 일 측면에 의하면, 프로세서와, 프로세서에 의해 실행 가능한 명령을 기억하기 위한 메모리를 포함하고, 상기 프로세서는 상기 이미지 처리 방법을 실행하도록 구성된 전자 기기를 제공한다.
본 발명의 일 측면에 의하면, 컴퓨터 프로그램 명령이 기억되어 있는 컴퓨터 판독 가능 기억 매체로서, 상기 컴퓨터 프로그램 명령은 프로세서에 의해 실행되면, 상기 이미지 처리 방법을 실현시키는 컴퓨터 판독 가능 기억 매체를 제공한다.
본 발명의 일 측면에 따르면, 컴퓨터 판독 가능 코드 또는 컴퓨터 판독 가능 코드를 기억하는 불휘발성 컴퓨터 판독 가능 기억 매체를 포함하고, 상기 컴퓨터 판독 가능 코드가 전자 기기의 프로세서에서 실행되면, 상기 전자 기기의 프로세서에 상기 이미지 처리 방법을 실현시키는 컴퓨터 프로그램 제품을 제공한다.
본 발명의 실시예에서는 피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하고, 제2 대상 소재에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하고, 제2 대상 소재의 색에 기초하여 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여 융합 얼굴 이미지를 취득한다. 이와 같이 하여, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재에 기초하여 색 융합을 실현하여, 융합의 위치를 보다 정확하게 하고, 융합의 효과를 보다 자연스럽게 할 수 있는 것 이외에 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행함으로써, 피처리 얼굴 이미지의 원색을 충분히 유지하면서, 대상 소재의 색을 융합시킴으로써, 가장자리부가 점진적이고, 또한 당초의 피처리 얼굴 이미지에 합치하는, 보다 현실적인 융합 얼굴 이미지를 취득하고, 융합 후의 색 효과를 보다 현실적으로 하며, 융합 얼굴 이미지를 보다 자연스럽게 할 수 있다.
또한, 상술한 개략적인 설명 및 다음의 상세한 설명은 예시적이고 해석적인 것에 불과하고, 본 발명을 한정하는 것은 아니다. 이하, 도면을 참고하면서 예시적인 실시예를 상세하게 설명함으로써, 본 발명의 다른 특징 및 측면은 명료해진다.
여기서, 본 명세서의 일부로서 포함되는 도면은 본 발명의 실시예에 바람직한 것이고, 명세서와 함께 본 발명의 기술적 해결 수단의 설명에 사용된다.
도 1은 본 발명의 실시예에 따른 이미지 처리 방법의 흐름도를 나타낸다.
도 2는 본 발명의 실시예에 따른 제1 대상 소재의 모식도를 나타낸다.
도 3은 본 발명의 실시예에 따른 제1 대상 소재의 모식도를 나타낸다.
도 4는 본 발명의 실시예에 따른 제1 대상 소재의 모식도를 나타낸다.
도 5는 본 발명의 실시예에 따른 제1 대상 소재의 모식도를 나타낸다.
도 6은 본 발명의 실시예에 따른 제1 대상 소재의 모식도를 나타낸다.
도 7은 본 발명의 실시예에 따른 제1 대상 소재의 모식도를 나타낸다.
도 8은 본 발명의 실시예에 따른 생성 된 삼각 메시의 모식도를 나타낸다.
도 9는 본 발명의 실시예에 따른 미리 설정된 얼굴 이미지의 모식도를 나타낸다.
도 10은 본 발명의 실시예에 따른 융합 얼굴 이미지의 모식도를 나타낸다.
도 11은 본 발명의 실시예에 따른 융합 얼굴 이미지의 모식도를 나타낸다.
도 12는 본 발명의 실시예에 따른 융합 얼굴 이미지의 모식도를 나타낸다.
도 13은 본 발명의 실시예에 따른 융합 얼굴 이미지의 모식도를 나타낸다.
도 14는 본 발명의 실시예에 따른 이미지 처리 장치의 블록도를 나타낸다.
도 15는 본 발명의 적용예의 모식도를 나타낸다.
도 16은 본 발명의 실시예에 따른 전자 기기의 블록도를 나타낸다.
도 17은 본 발명의 실시예에 따른 전자 기기의 블록도를 나타낸다.
이하, 도면을 참조하면서 본 발명의 다양한 예시적인 실시예, 특징 및 양태를 상세하게 설명한다. 도면에서, 동일한 참조 부호는 기능이 동일하거나 유사한 요소를 나타낸다. 도면에서 실시예의 다양한 양태를 나타내었지만, 특별히 명기되어 있지 않는 한, 도면은 반드시 원치수에 비례하고 있다고는 할 수 없다.
여기서의 용어 「예시적」이란, 「예, 실시예로서 사용되는 것 또는 설명적인 것」을 의미한다. 여기서, 「예시적」으로 설명되는 어떠한 실시예는 반드시 다른 실시예보다 바람직하거나 우수한 것이라고 해석된다고는 할 수 없다.
본 명세서에서 용어 「및/또는」은 단지 관련 대상과의 관련 관계를 기술하는 것으로, 3가지 관계가 존재 가능함을 나타내고, 예를 들면, A 및/또는 B는 A만이 존재하거나, A와 B 양쪽이 존재하거나, B만이 존재한다는 3가지 경우를 나타내도 된다. 또한, 본 명세서에서의 용어 「하나 이상」은 복수 중 어느 하나, 또는 복수 중 2개 이상의 임의의 조합을 나타내고, 예를 들면, A, B, C 중 하나 이상을 포함하는 것은 A, B 및 C로 이루어지는 집합에서 선택된 어느 하나 또는 복수의 요소를 포함하는 것을 나타내도 된다.
또한, 본 발명을 보다 잘 설명하기 위해, 이하의 구체적인 실시형태에는 많은 구체적인 세부가 개시되어 있다. 당업자라면, 본 발명은 어떠한 구체적인 세부가 없어도 동일하게 실시할 수 있음을 이해해야 한다. 몇 개의 실시예에서는 본 발명의 취지를 강조하기 위해 당업자에게 잘 알려져 있는 방법, 수단, 소자 및 회로에 대해 상세한 설명은 행하지 않는다.
도 1은 본 발명의 실시예에 따른 이미지 처리 방법의 흐름도를 나타낸다. 상기 방법은 이미지 처리 장치 또는 이미지 처리 시스템 등에 적용되어도 된다. 이미지 처리 장치는 사용자측 장치(User Equipment, UE), 휴대 기기, 사용자 단말, 단말, 셀룰러 폰, 무선 전화, 퍼스널 디지털 어시스턴트(Personal Digital Assistant, PDA), 휴대용 기기, 계산 장치, 차재 장치, 웨어러블 장치 등의 단말 장치, 서버 또는 다른 처리 장치 등이어도 된다. 일례에서, 상기 이미지 처리 방법은 클라우드 서버 또는 로컬 서버에 적용되어도 된다. 클라우드 서버는 퍼블릭 클라우드 서버여도 되고, 프라이빗 클라우드 서버여도 되고, 실제 상황에 따라 적절히 선택되어도 된다.
몇 개의 가능한 실시형태에서는 이 이미지 처리 방법은 프로세서에 의해 메모리에 기억되어 있는 컴퓨터 판독 가능 명령을 불러냄으로써 실현되어도 된다.
도 1에 나타내는 바와 같이, 가능한 일 실시형태에서는 상기 이미지 처리 방법은 단계(S11)∼단계(S13)을 포함해도 된다.
단계(S11)에서, 피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성한다.
여기서, 피처리 얼굴 이미지는 얼굴을 포함하는 임의의 이미지여도 된다. 피처리 얼굴 이미지는 하나의 얼굴을 포함해도 되고, 복수의 얼굴을 포함해도 된다. 그 실현 형태는 실제 상황에 따라 적절하게 결정되어도 되고, 본 발명의 실시예에서는 한정되지 않는다.
피처리 얼굴 이미지의 뷰티 가공 조작에 대해 그 조작 내용은 실제 상황에 따라 적절히 결정되어도 되고, 이하의 각 실시예에 한정되지 않는다. 가능한 일 실시형태에서는 상기 뷰티 가공 조작은 피처리 얼굴 이미지에 뷰티 가공 처리를 행하는 것을 지시하는 조작을 포함해도 된다. 가능한 일 실시형태에서는 상기 뷰티 가공 조작은 뷰티 가공 처리에 사용되는 제1 대상 소재를 선택하는 조작 등을 추가로 포함해도 된다. 가능한 일 실시형태에서는 상기 뷰티 가공 조작은 뷰티 가공의 처리 타입을 지시하는 조작 등을 추가로 포함해도 된다.
여기서, 뷰티 가공의 처리 타입은 실제 상황에 따라 적절히 결정되어도 되고, 1종류의 처리 타입을 포함해도 되고, 복수 종류의 처리 타입 등을 포함해도 된다. 가능한 일 실시형태에서는 뷰티 가공의 처리 타입은 아이 메이크업 처리, 치크 메이크업 처리, 눈썹 메이크업 처리 및 윤곽 수정 처리 중 하나 이상을 포함해도 된다.
제1 대상 소재는 피처리 얼굴 이미지의 뷰티 가공을 실현하기 위한 소재여도 된다. 제1 대상 소재의 실현 형태는 뷰티 가공의 처리 타입에 따라 적절히 결정되어도 된다. 가능한 일 실시형태에서는 제1 대상 소재는 아이 메이크업 처리에 사용되는 속눈썹 소재, 아이라인 소재 및 아이섀도 소재 중 하나 이상을 포함할 수 있다. 가능한 일 실시형태에서는 제1 대상 소재는 치크 메이크업 처리에 사용되는 치크 소재, 눈썹 메이크업 처리에 사용되는 눈썹 소재 및 윤곽 수정 처리에 사용되는 얼굴 윤곽 수정 소재 중 하나 이상을 포함해도 된다. 제1 대상 소재의 실현 형태는 실제 상황에 따라 적절히 선택되어도 되고, 이하의 각 실시예에 한정되지 않는다.
도 2∼도 7은 본 발명의 실시예에 따른 제1 대상 소재의 모식도를 나타낸다. 도면에 나타내는 바와 같이, 몇 개의 가능한 실시형태에서는 제1 대상 소재는 도 2에 나타내는 속눈썹 소재, 도 3에 나타내는 아이라인 소재, 도 4에 나타내는 아이섀도 소재, 도 5에 나타내는 치크 소재, 도 6에 나타내는 눈썹 소재 및 도 7에 나타내는 얼굴 윤곽 수정 소재 등의 복수의 형태를 가져도 된다. 복수의 형태를 갖는 제1 대상 소재에 의해, 피처리 얼굴 이미지에 대해 많은 종류의 뷰티 가공을 행함으로써, 이미지 처리의 전면성 및 유연성을 향상시킬 수 있다.
동일한 종류의 제1 대상 소재는 복수의 형태 또는 복수의 색 등을 포함해도 된다. 예를 들면, 속눈썹 소재는 복수의 형상의 속눈썹을 포함해도 되고, 치크 소재는 복수의 형상 또는 색의 치크 등을 포함해도 되고, 이하의 각 실시예에 한정되지 않는다. 이와 같이, 가능한 일 실시형태에서는, 단계(S11)에 의해, 뷰티 가공 조작으로 선택된 제1 대상 소재에 기초하여, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성해도 된다.
대상 부위는 피처리 얼굴 이미지에서의 뷰티 가공이 필요한 임의의 부위여도 된다. 대상 부위가 어느 부위를 포함하는지 및 그 실현 형태는 뷰티 가공의 처리 타입에 따라 유연하게 결정되어도 된다. 가능한 일 실시형태에서는 처리 타입이 아이 메이크업 처리를 포함하는 경우, 대상 부위는 안부를 포함해도 되고, 상기 안부는 속눈썹, 안구 및 눈꺼풀 중 하나 이상 등을 포함해도 된다. 가능한 일 실시형태에서는 처리 타입이 치크 메이크업 처리를 포함하는 경우, 대상 부위는 볼 부위를 포함해도 된다. 가능한 일 실시형태에서는 처리 타입이 눈썹 메이크업 처리를 포함하는 경우, 대상 부위는 눈썹 부분을 포함해도 된다. 가능한 일 실시형태에서는 처리 타입이 윤곽 수정 처리를 포함하는 경우, 대상 부위는 비량의 양측부, 이마부 또는 광대뼈 아래에 위치하는 부위 등의, 윤곽 수정 처리에 관한 부위를 포함해도 된다.
제2 대상 소재는 제1 대상 소재에 기초하여 생성된, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 대상 소재여도 된다. 제2 대상 소재는 피처리 얼굴 이미지에서의 대상 부위의 위치에 대응하는 것이어도 되고, 피처리 얼굴 이미지에서의 대상 부위의 형상 등에 대응하는 것 등이어도 된다. 제2 대상 소재의 생성 형태는 실제 상황에 따라 유연하게 결정되어도 되고, 하기 각 실시예의 기재를 참조해도 되고, 여기서 상세한 설명은 생략한다.
단계(S12)에서, 제2 대상 소재에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정한다.
상기 실시예에 의하면, 제2 대상 소재는 대상 부위에 대응하는 소재여도 된다. 이 때문에, 가능한 일 실시형태에서는 제2 대상 소재에 기초하여 피처리 얼굴 이미지에서의 대상 부위가 위치하는 영역의 범위를 추가로 수정함으로써, 보다 정확한 대상 부위의 위치를 취득하도록 해도 된다. 따라서, 단계(S12)에 의해, 제2 대상 소재에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정할 수 있다.
단계(S12)의 실현 형태는 실제 상황에 따라 유연하게 결정되어도 된다. 예를 들면, 제2 대상 소재의 각 화소점의 투명도에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역 등을 결정해도 되고, 하기 각 실시예의 기재를 참조하면 되고, 여기서 상세한 설명을 생략한다.
단계(S13)에서, 제2 대상 소재의 색에 기초하여, 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여, 융합 얼굴 이미지를 취득한다.
여기서, 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하는 공정은 실제의 상황에 따라 유연하게 결정되어도 되고, 이하의 각 실시예에 한정되지 않는다. 가능한 일 실시형태에서는 제2 대상 소재의 색에 기초하여 대상 부위의 이미지 영역에 대해 1종류 또는 많은 종류의 형태의 색 융합 처리를 행함으로써 융합 후의 색을 보다 진실된 것으로 해도 된다.
1종류 또는 많은 종류의 형태의 색 융합 처리에 대해, 본 발명의 실시예에서는 특별히 한정되지 않고, 실제 상황에 따라 유연하게 선택되어도 된다. 많은 종류의 색 융합 처리의 융합 형태는 동일해도 되고, 상이해도 된다. 몇 개의 가능한 실시형태에서는 많은 종류의 색 융합 형태는 곱셈 모드, 소프트 라이트 모드, 직접 오버레이 모드 및 가중 오버레이 모드 등 중 하나 이상을 포함해도 된다. 몇 개의 가능한 실시형태에서는 대상 부위의 원색과 제2 대상 소재의 색을 곱셈 또는 소프트 라이트 모드로 융합시키고, 융합 후의 색을 초기 융합 색으로 하여 대상 부위의 원색과 오버레이 또는 가중 오버레이 모드에서 융합시켜, 융합 얼굴 이미지를 취득함으로써, 융합 얼굴 이미지의 융합 후의 색의 진실성을 향상시키도록 해도 된다.
단계(S13)의 실현 형태는 색 융합 처리 형태에 따라 유연하게 변화해도 되고, 이하의 각 실시예를 참조하면 되며, 여기서 상세한 설명은 생략한다.
본 발명의 실시예에서는 피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하고, 제2 대상 소재에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하고, 제2 대상 소재의 색에 기초하여 대상 부위의 이미지 영역에 대해 색 융합을 행하여 융합 이미지를 취득한다. 이에 의해, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재에 기초하여 색 융합을 실현함으로써, 융합의 위치를 보다 정확하게 하고, 융합의 효과를 보다 자연스럽게 할 수 있는 것 이외에, 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행함으로써, 융합 후의 색의 효과를 보다 진실한 것으로 하여, 취득된 융합 얼굴 이미지를 보다 자연스럽게 할 수 있다.
가능한 일 실시형태에서는 본 발명의 실시예에 따른 방법은 피처리 얼굴 이미지에서의 대상 부위를 식별하여 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 단계를 추가로 포함해도 된다.
여기서, 초기 위치는 피처리 얼굴 이미지에 기초하여 결정된, 피처리 얼굴 이미지에서의 대상 부위의 개략적인 위치이어도 된다. 대상 부위의 초기 위치를 결정하는 방법에 대해 본 발명의 실시예에서는 특별히 한정되어 있지 않고, 실제 상황에 따라 유연하게 선택되어도 되며, 이하의 각 실시예에 한정되지 않는다.
가능한 일 실시형태에서는 대상 부위의 키포인트를 식별함으로써 대상 부위의 초기 위치를 결정해도 된다. 예를 들면, 피처리 얼굴 이미지에서, 식별된 대상 부위의 키포인트의 좌표에 기초하여 초기 위치를 결정하거나, 또는 식별된 대상 부위의 키포인트에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 범위를 결정함으로써, 대상 부위의 초기 위치를 취득할 수 있다.
가능한 일 실시형태에서는 피처리 얼굴 이미지에서의 대상 부위를 식별하여 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 것은
피처리 얼굴 이미지에서 하나 이상의 얼굴 키포인트를 취득하는 것과,
얼굴 키포인트에 기초하여, 피처리 얼굴 이미지에서 대상 부위에 대응하는 삼각 메시를 제작하는 것과,
삼각 메시의 위치 좌표에 기초하여, 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 결정하는 것을 포함해도 된다.
여기서, 얼굴 키포인트는 얼굴의 면부의 키 에어리어를 위치 결정하는 관련 키포인트여도 되고, 예를 들면, 안부 키포인트, 입부 키포인트, 눈썹 키포인트 또는 코부 키포인트 등이다. 취득된 얼굴 키포인트가 구체적으로 어떤 키포인트를 포함하는 것인지, 또한 포함되는 키포인트의 수에 대해 본 발명의 실시예에서는 특별히 한정되지 않고 실제 상황에 따라 유연하게 선택되어도 된다. 몇 개의 가능한 실시형태에서는 피처리 얼굴 이미지의 모든 관련 키포인트를 취득해도 되고, 취득한 키포인트의 수는 100∼300개여도 되고, 예를 들면, 얼굴의 106개의 얼굴 전체 키포인트(Face106) 등 또는 240이나 282개의 얼굴 키포인트 등을 포함해도 된다. 몇 개의 가능한 실시형태에서는 피처리 얼굴 이미지의 일부의 키포인트, 예를 들면, 대상 부위에 관한 키포인트를 취득해도 된다. 예를 들면, 대상 부위가 안부인 경우, 얼굴 키포인트로서 안각 및 안구의 키포인트 등을 취득해도 된다.
얼굴 키포인트의 취득 방법에 대해 본 발명의 실시예에서는 특별히 한정되어 있지 않고, 이미지의 얼굴 키포인트를 식별할 수 있는 방법이면, 얼굴 키포인트의 취득 방법으로서 실시 가능하다.
하나 이상의 얼굴 키포인트를 취득한 후, 얼굴 키포인트에 기초하여 피처리 얼굴 이미지에서 삼각 메시를 제작해도 된다. 삼각 메시의 제작 방법에 대해 본 발명의 실시예에서는 특별히 한정되지 않는다. 가능한 일 실시형태에서는 취득된 얼굴 키포인트 중, 인접하는 포인트를 3개씩 연결하여 복수의 삼각 메시를 취득해도 된다. 몇 개의 가능한 실시형태에서는 먼저 취득된 얼굴 키포인트에 기초하여 보간 처리를 행하여, 보간 포인트를 취득하고, 다음으로 얼굴 키포인트와 보간 포인트로 이루어지는 포인트 세트에서 인접하는 키포인트를 3개씩 연결하여 복수의 삼각 메시를 취득해도 된다.
도 8은 본 발명의 실시예에 따른 제작된 삼각 메시의 모식도를 나타낸다(이미지 내의 대상을 보호하기 위해 이미지에서의 얼굴 부위의 일부를 모자이크 처리하였다). 도면에서 알 수 있는 바와 같이, 가능한 일 실시형태에서는 피처리 얼굴 이미지의 얼굴 키포인트와 보간 포인트를 연결함으로써 복수의 삼각 메시를 취득할 수 있다.
가능한 일 실시형태에서는 얼굴 키포인트에 기초하여, 피처리 얼굴 이미지에서 대상 부위에 대응하는 삼각 메시를 제작해도 된다. 여기서, 삼각 메시의 제작 방법은 상기 각 실시예를 참조할 수 있지만, 상이점은 목표 대상 부위에 관한 얼굴 키포인트와 보간 포인트를 취득하여 대상 부위에 대응하는 삼각 메시를 제작하고, 피처리 얼굴 이미지에서의 다른 부위의 삼각 메시의 제작을 생략한다는 점에 있다.
대상 부위에 대응하는 삼각 메시를 취득한 후, 피처리 얼굴 이미지에서의 상기 삼각 메시의 위치 좌표에 기초하여, 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 결정할 수 있다. 초기 위치의 표시 형태에 대해 본 발명의 실시예에서는 특별히 한정되어 있지 않고, 예를 들면, 가능한 일 실시형태에서는 대상 부위에 대응하는 하나 이상의 삼각 메시의 중심점 위치를 대상 부위의 초기 위치로 해도 되고, 가능한 일 실시형태에서는 대상 부위에 대응하는 하나 이상의 삼각 메시의 각 정점의 좌표를 대상 부위의 초기 위치로 해도 되고, 실제 상황에 따라 유연하게 선택되어도 된다.
피처리 얼굴 이미지에서 하나 이상의 얼굴 키포인트를 취득하고, 얼굴 키포인트에 기초하여 피처리 얼굴 이미지에서 대상 부위에 대응하는 삼각 메시를 제작하고, 삼각 메시의 위치 좌표에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 결정한다. 이로써, 키포인트의 식별 및 메시의 제작에 의해, 피처리 얼굴 이미지에서의 대상 부위의 초보적인 위치 결정을 효율적이고 정확하게 행하고, 그 후, 대상 부위에 대응하는 제2 대상 소재를 용이하게 취득하고, 이미지 처리의 정밀도 및 진실성을 향상시킬 수 있다.
가능한 일 실시형태에서는 단계(S11)은
선택된 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위를 융합시켜 표준 소재 이미지를 취득하는 것과,
초기 위치에 기초하여 표준 소재 이미지에서 제2 대상 소재를 추출하는 것을 포함해도 된다.
여기서, 미리 설정된 얼굴 이미지는 완전하고 전면적인 얼굴 부위를 포함하고, 미리 설정된 얼굴 이미지에서의 각 얼굴 부위의 위치가 표준적인 표준적 얼굴 이미지 템플릿이어도 된다. 미리 설정된 얼굴 이미지의 실현 형태는 실제 상황에 따라 유연하게 결정되어도 되고, 얼굴 이미지 처리 분야에서 사용되는 표준 얼굴(standard face)이면 미리 설정된 얼굴 이미지의 실현 형태로 할 수 있다. 도 9는 본 발명의 실시예에 따른 미리 설정된 얼굴 이미지의 모식도를 나타낸다(상기 실시예와 동일하게, 이미지 내의 대상을 보호하기 위해 이미지에서의 얼굴 부위의 일부를 모자이크 처리하였다). 도면에서 알 수 있는 바와 같이, 일례에 있어서, 미리 설정된 얼굴 이미지에 포함된 얼굴 부위는 명확하고 완전하며, 얼굴에서의 각 얼굴 부위의 객관적인 분포에 합치하는 것이다.
표준적인 얼굴 이미지에서의 각 얼굴 부위의 위치가 표준적이기 때문에, 제1 대상 소재는 미리 설정된 얼굴 이미지에서의 대상 부위에 대응하는 위치와 직접 융합하여 표준 소재 이미지를 취득할 수 있다. 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위의 융합 방법에 대해 본 발명의 실시예에서는 특별히 한정되어 있지 않고, 가능한 실시형태에서는 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위에 대응하는 화소점의 화소값을 직접적으로 오버레이하여 표준 소재 이미지를 취득해도 된다. 몇 개의 가능한 실시형태에서는 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위에 대응하는 화소점의 화소값을 소정의 가중으로 가중 오버레이하여 융합을 실현해도 된다.
선택된 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위를 융합시켜 표준 소재 이미지를 취득할 수 있다. 가능한 일 실시형태에서는 상기 각 실시예의 초기 위치에 기초하여 표준 소재 이미지에서 제2 대상 소재를 추출해도 된다.
가능한 일 실시형태에서는 초기 위치에 기초하여 제2 대상 소재를 추출하는 방법은 표준 소재 이미지에서의 초기 위치에 대응하는 범위 내의 각 화소점의 색 값 및 투명도를 취득하고, 색 값 및 투명도를 포함하는 복수의 화소점으로 이루어진 이미지를 제2 대상 소재로 하는 것을 포함해도 된다.
선택된 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위를 융합시켜 표준 소재 이미지를 취득하고, 초기 위치에 기초하여 표준 소재 이미지에서 제2 대상 소재를 추출함으로써, 그 후의 융합용 제2 대상 소재를, 미리 설정된 얼굴 이미지와 융합한 보다 진실한 소재로 하고, 그 후에 취득되는 융합 얼굴 이미지의 진실성을 향상시키고, 또한, 초기 위치가 피처리 얼굴 이미지에서의 대상 부위를 식별하여 취득된 것이기 때문에, 추출된 제2 대상 소재를 피처리 얼굴 이미지에서의 대상 부위의 위치 영역과 보다 잘 융합시켜, 융합 얼굴 이미지의 진실성을 더욱 향상시킬 수 있다.
가능한 일 실시형태에서는 단계(S12)는 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것을 포함해도 된다.
피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 결정한 후, 제2 대상 소재에 기초하여, 피처리 얼굴 이미지에 대해 샘플링을 행하여, 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정해도 된다. 가능한 일 실시형태에서는 피처리 얼굴 이미지에서의 제2 대상 소재의 화소점의 위치에 대응하는 영역을 대상 부위의 이미지 영역으로 해도 된다. 가능한 일 실시형태에서는 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여 피처리 얼굴 이미지에서의 일부 위치의 화소점을 선별함으로써 대상 부위의 이미지 영역을 보다 정확하게 결정해도 된다.
제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여, 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정함으로써, 피처리 얼굴 이미지에서, 대상 부위의 이미지 영역을 보다 정확하게 위치 결정함으로써, 그 후에 취득되는 융합 얼굴 이미지의 정밀도를 향상시킬 수 있다.
가능한 일 실시형태에서는 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여, 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것은
제2 대상 소재의 화소점의 투명도가 미리 설정된 투명도 범위에 있는 경우, 피처리 얼굴 이미지에서의 화소점의 위치에 대응하는 영역을 대상 부위의 이미지 영역으로서 결정하는 것을 포함해도 된다.
여기서, 미리 설정된 투명도 범위의 구체적인 범위는 실제 상황에 따라 유연하게 결정되어도 된다. 가능한 일 실시형태에서는 미리 설정된 투명도 범위를 100％ 미만으로 해도 된다. 즉, 제2 대상 소재의 화소점의 투명도가 100％ 미만인(완전한 투명이 아닌) 경우, 피처리 얼굴 이미지에서의 화소점의 위치에 대응하는 영역을 대상 부위의 이미지 영역으로 해도 된다. 가능한 일 실시형태에서는 미리 설정된 투명도 범위를, 다른 투명도보다 낮거나, 또는 특정 투명도 범위 내에 있는 등으로 해도 된다. 미리 설정된 투명도 범위의 구체적인 값에 대해 본 발명의 실시예에서는 특별히 한정되지 않는다.
제2 대상 소재의 화소점의 투명도가 미리 설정된 투명도 범위에 있는 경우, 피처리 얼굴 이미지에서의 화소점의 위치에 대응하는 영역을 대상 부위의 이미지 영역으로서 결정함으로써, 미리 설정된 투명도 범위의 값을 설정함으로써, 원하는 대상 부위의 이미지 영역을 보다 정확하게 결정하고, 결정된 이미지 영역의 진실성 및 신뢰성을 향상시키고, 취득되는 융합 얼굴 이미지의 진실성 및 정확성을 더욱 향상시킬 수 있다.
가능한 일 실시형태에서는 단계(S13)은
대상 부위의 원색을 취득하는 것과,
뷰티 가공 조작으로 선택된 처리 타입에 따라, 원색과 제2 대상 소재의 색의 제1 융합 처리를 행하여, 대상 부위의 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하는 것과,
원색과 초기 융합 색의 제2 융합 처리를 행하여 융합 얼굴 이미지를 취득하는 것을 포함해도 된다.
여기서, 대상 부위의 원색은 피처리 얼굴 이미지에서의 대상 부위의 색이다. 가능한 일 실시형태에서는 뷰티 가공 조작으로 선택된 처리 타입에 따라, 상기 원색과 제2 대상 소재의 색의 제1 융합 처리를 행하여, 초기 융합 얼굴 이미지를 취득해도 된다.
여기서, 원색과 제2 대상 소재의 색의 제1 융합 처리를 행하는 것은 피처리 얼굴 이미지의 각 화소점의 원색과 제2 대상 소재에서의 대응 위치의 화소점의 색의 제1 융합 처리를 각각 행하여, 초기 융합 얼굴 이미지를 취득하는 것이어도 된다. 제1 융합 처리의 방법에 대해, 본 발명의 실시예에서는 특별히 한정되어 있지 않고, 처리 타입의 차이에 따라 유연하게 변화해도 되고, 하기 각 실시예의 기재를 참조하면 되며, 여기서는 상세한 설명을 생략한다.
제1 융합 처리 후의 초기 융합 얼굴 이미지에서, 각 화소점의 색은 초기 융합 색이어도 된다. 가능한 일 실시형태에서는 피처리 얼굴 이미지에서의 복수의 화소점의 원색과 초기 융합 얼굴 이미지에서의 대응 위치의 화소점의 초기 융합 색의 제2 융합 프로세스를 추가로 행하여, 융합 얼굴 이미지를 취득해도 된다. 여기서, 제2 융합 처리의 방법에 대해서도, 하기 각 실시예의 기재를 참조하면 되고, 여기서 상세한 설명은 생략한다.
피처리 얼굴 이미지의 원색과 제2 대상 소재의 색의 제1 융합 처리를 행하여, 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하고, 추가로 초기 융합 색과 피처리 얼굴 이미지의 원색의 제2 융합 처리를 행하여 융합 얼굴 이미지를 취득한다. 이로써, 2회의 융합 처리에 의해, 피처리 얼굴 이미지의 원색을 충분히 유지하면서, 대상 소재의 색을 융합시킴으로써, 가장자리부가 점진적이고, 또한 당초의 피처리 얼굴 이미지에 합치하는, 보다 현실적인 융합 얼굴 이미지를 취득할 수 있다.
상기 각 실시예에 기재된 바와 같이, 뷰티 가공 조작으로 선택된 처리 타입에 따라, 제1 융합 처리의 방법도 유연하게 변화해도 된다. 가능한 일 실시형태에서, 뷰티 가공 조작에 의해 선택된 처리 타입에 따라, 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 초기 융합 얼굴 이미지를 취득하는 것은
원색과 제2 대상 소재의 색을 곱셈 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것을 포함해도 된다.
여기서, 원색과 제2 대상 소재의 색을 곱셈 모드로 융합시킬 때, 원색과 제2 대상 소재의 색을 2층으로 하여 곱셈 모드로 혼합하고, 2층의 색을 매끄럽고 비선형적으로 어둡게 하도록 해도 된다.
일례에서, 곱셈 모드에서의 융합은 하기 식 (1)로 나타내어도 된다.
단, A는 제2 대상 소재의 색, B는 원색, C는 초기 융합 얼굴 이미지의 색이다.
원색과 제2 대상 소재의 색을 곱셈 모드로 융합시킴으로써, 융합시에 계조 오버플로가 발생하는 것을 저감시키고, 취득된 초기 융합 얼굴 이미지의 얼룩진 배경을 숨기고, 융합 후의 초기 융합 얼굴 이미지의 이미지 효과를 보다 양호하게 할 수 있다.
가능한 일 실시형태에서는 뷰티 가공 조작으로 선택된 처리 타입에 따라, 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 초기 융합 얼굴 이미지를 취득하는 것은
원색과 제2 대상 소재의 색을 소프트 라이트 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것을 포함해도 된다.
여기서, 원색과 제2 대상 소재의 색을 소프트 라이트 모드로 융합시킬 때, 제2 대상 소재의 색의 명암도에 따라 융합 후의 색이 밝아지거나, 또는 어두워지는 것을 결정해도 된다. 제2 대상 소재의 색이 소정의 색보다 밝은 경우, 취득된 초기 융합 얼굴 이미지가 밝아진다. 제2 대상 소재의 색이 소정의 색보다 어두운 경우, 취득된 초기 융합 얼굴 이미지가 어두워진다. 여기서, 소정의 색은 실제 상황에 따라 유연하게 설정되어도 되고, 일 예에서, 소정의 색은 중성 회색(50％ 회색)이어도 된다.
일례에서, 소프트라이트 모드에서의 융합은 하기 식 (2)로 나타내어도 된다.
단, A는 제2 대상 소재의 색, B는 원색, C는 초기 융합 얼굴 이미지의 색이다.
원색과 제2 대상 소재의 색을 소프트 라이트 모드로 융합시킴으로써, 제2 대상 소재의 색에 기초하여 취득된 초기 융합 얼굴 이미지의 명암 효과를 조정하여, 융합 후의 초기 융합 얼굴 이미지를 보다 자연스럽게 하고, 그 이미지 효과를 보다 양호하게 할 수 있다.
가능한 일 실시형태에서는 원색과 초기 융합 색의 제2 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 것은
제2 대상 소재의 하나 이상의 화소점의 투명도 및 미리 설정된 융합 강도에 기초하여, 원색과 초기 융합 색의 융합 가중치 각각을 결정하는 것과,
원색과 초기 융합 색을 각각의 융합 가중치로 융합시켜, 융합 얼굴 이미지를 취득하는 것을 포함해도 된다.
여기서, 미리 설정된 융합 강도는 융합시의 원색 및 초기 융합 색의 각각의 융합 가중치를 지시하기 위한 것이고, 그 값이 실제 상황에 따라 유연하게 설정되어도 된다. 가능한 일 실시형태에서는 미리 설정된 융합 강도로서 원색과 초기 융합 색의 융합 가중치가 미리 설정되어도 된다. 가능한 일 실시형태에서는 피처리 얼굴 이미지의 뷰티 가공 조작은 융합 강도에 대한 선택을 포함해도 된다. 이 경우, 뷰티 가공 조작으로 선택된 융합 강도를 미리 설정된 융합 강도로 해도 된다.
몇 개의 가능한 실시형태에서는 미리 설정된 융합 강도에 기초하여 원색과 초기 융합 색의 융합 가중치를 결정하는 것 외에, 제2 대상 소재에서의 복수의 화소점의 투명도와 미리 설정된 융합 강도의 조합에 기초하여, 각 화소점의 융합 가중치 각각을 결정해도 된다. 예를 들면, 몇 개의 가능한 실시형태에서는 제2 대상 소재의 특정 화소점의 투명도가 75％∼100％ 등의 일정한 투명도 범위에 있는 경우, 상기 화소점의 초기 융합 색의 융합 가중치를 특정 범위(예를 들면, 0∼15％ 등)로 해도 된다. 구체적인 투명도 및 융합 가중치의 범위 또는 값 등은 전부 실제 상황에 따라 유연하게 설정되어도 되고, 본 발명의 각 실시예에 한정되지 않는다. 일례에서, 제2 대상 소재의 특정 화소점의 투명도가 100％인 경우, 상기 화소점이 융합 후에 이미지에 나타나 있지 않은 것으로 생각되기 때문에, 상기 화소점의 초기 융합 색의 융합 가중치는 0이어도 된다. 융합 가중치와 투명도 및 미리 설정된 융합 강도의 대응 관계에 대해서도 실제 상황에 따라 유연하게 설정되어도 되고, 본 발명의 실시예에서는 특별히 한정되지 않는다.
융합 가중치를 결정한 후, 원색과 초기 융합 색을 각각의 융합 가중치로 서로 융합시켜, 융합 얼굴 이미지를 취득해도 된다. 여기서, 융합 가중치로 융합을 행할 때, 중첩으로 직접 융합시켜도 되고, 다른 방식(예를 들면, 상기 각 실시예에 기재된 곱셈 모드 또는 소프트 라이트 모드 등)으로 융합시켜도 된다. 구체적인 융합 방식의 선택에 대해서도, 본 발명의 실시예에서는 특별히 한정되지 않는다.
제2 대상 소재의 하나 이상의 화소점의 투명도 및 미리 설정된 융합 강도에 기초하여, 원색과 초기 융합 색의 융합 가중치의 각각을 결정하고, 원색과 초기 융합 색을 각각의 융합 가중치로 융합시켜, 융합 얼굴 이미지를 취득함으로써, 실제의 필요에 따라, 미리 설정된 융합 강도를 유연하게 설정함으로써, 원하는 융합 강도 및 효과를 갖는 융합 얼굴 이미지를 취득하고, 이미지 처리의 유연성을 향상시킬 수 있다.
선택된 제1 대상 소재에 따라 최종적으로 취득된 융합 얼굴 이미지도 유연하게 변화해도 된다. 도 10∼도 13은 본 발명의 실시예에 따른 융합 얼굴 이미지의 모식도를 나타낸다(상기 각 실시예와 동일하게, 이미지 내의 대상을 보호하기 위해 이미지에서의 얼굴 부위의 일부를 모자이크 처리하였다). 여기서, 도 10은 속눈썹 소재, 아이라인 소재 및 아이섀도 소재를 융합시킨 융합 얼굴 이미지이고, 도 11은 치크 소재를 융합시킨 융합 얼굴 이미지이고, 도 12는 눈썹 소재를 융합시킨 융합 얼굴 이미지이고, 도 13은 얼굴 윤곽 수정 소재를 융합시킨 융합 얼굴 이미지이다. 상기 각 이미지에 의하면, 상기 각 실시예에 기재된 이미지 처리 방법에 의해, 양호한 융합 효과를 갖는 진실한 융합 얼굴 이미지를 취득할 수 있다.
도 14는 본 발명의 실시예에 따른 이미지 처리 장치의 블록도를 나타낸다. 도면 나타내는 바와 같이, 상기 이미지 처리 장치(20)는
피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 소재 생성 모듈(21)과,
제2 대상 소재에 기초하여, 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 대상 부위 결정 모듈(22)과,
제2 대상 소재의 색에 기초하여, 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여 융합 얼굴 이미지를 취득하는 융합 모듈(23)을 구비해도 된다.
가능한 일 실시형태에서는 장치는 추가로, 피처리 얼굴 이미지에서의 대상 부위를 식별하여 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 것에 사용되고, 소재 생성 모듈은 선택된 제1 대상 소재와 미리 설정된 얼굴 이미지의 대상 부위를 융합시켜, 표준 소재 이미지를 취득하는 것과, 초기 위치에 기초하여 표준 소재 이미지에서 제2 대상 소재를 추출하는 것에 사용되고 있다.
가능한 일 실시형태에서는 장치는 추가로, 피처리 얼굴 이미지에서 하나 이상의 얼굴 키포인트를 취득하는 것과, 얼굴 키포인트에 기초하여 피처리 얼굴 이미지에서 대상 부위에 대응하는 삼각 메시를 제작하는 것과, 삼각 메시의 위치 좌표에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 결정하는 것에 사용되고 있다.
가능한 일 실시형태에서는 대상 부위 결정 모듈은 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것에 사용된다.
가능한 일 실시형태에서는 대상 부위 결정 모듈은 추가로, 제2 대상 소재의 화소점의 투명도가 미리 설정된 투명도 범위에 있는 경우, 피처리 얼굴 이미지에서의 화소점의 위치에 대응하는 영역을 대상 부위의 이미지 영역으로서 결정하는 것에 사용되고 있다.
하나의 가능한 실시형태에서는 융합 모듈은 대상 부위의 원색을 취득하는 것과, 뷰티 가공 조작에 의해 선택된 처리 타입에 따라, 원색과 제2 대상 소재의 색의 제1 융합 처리를 행하여, 대상 부위의 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하는 것과, 원색과 초기 융합 색의 제2 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 것에 사용되고 있다.
가능한 일 실시형태에서는 처리 타입은 아이 메이크업 처리, 치크 메이크업 처리 및 눈썹 메이크업 처리 중 하나 이상을 포함하고, 융합 모듈은 추가로, 원색과 제2 대상 소재의 색을 곱셈 모드로 융합시켜, 초기 융합 얼굴 이미지를 취득하는 것에 사용되고 있다.
가능한 일 실시형태에서는 처리 타입은 윤곽 수정 처리를 포함하고, 상기 융합 모듈은 추가로, 원색과 제2 대상 소재의 색을 소프트 라이트 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것에 사용되고 있다.
가능한 일 실시형태에서는 융합 모듈은 추가로, 제2 대상 소재의 하나 이상의 화소점의 투명도 및 미리 설정된 융합 강도에 기초하여 원색과 초기 융합 색의 융합 가중치를 각각 결정하고, 원색과 초기 융합 색을 각각의 융합 가중치로 융합시켜 융합 얼굴 이미지를 취득하는 것에 사용되고 있다.
가능한 일 실시형태에서는 제1 대상 소재는 속눈썹 소재, 아이라인 소재, 아이섀도 소재, 치크 소재, 눈썹 소재 및 얼굴 윤곽 수정 소재 중 하나 이상을 포함한다.
응용 장면의 예시
컴퓨터 비전 분야에서는 어떻게 보다 진실한 뷰티 가공 이미지를 취득할지는 현시점에서 해결해야 할 문제이다.
도 15는 본 발명의 응용예의 모식도를 나타낸다. 도면에 나타내는 바와 같이, 본 발명의 응용예는
당초의 뷰티 가공 소재(도 2∼도 7에 나타내는 것)를 제1 대상 소재로서 도 9에 나타내는 미리 설정된 얼굴 이미지에서 대응하는 대상 부위의 위치에 배치하고(도 5에 나타내는 치크 소재를 표준 얼굴의 얼굴부 영역에 배치하고, 도 2∼도 4에 나타내는 아이 메이크업 소재를 표준 얼굴의 안부 영역에 배치하고), 표준 소재 이미지를 취득하는 단계(S31)과,
피처리 얼굴 이미지에서, 키포인트의 식별에 의해 얼굴 키포인트를 결정하고, 얼굴 키포인트와 얼굴 키포인트에 의해 보간된 복수의 포인트를 사용하여 도 8에 나타내는 피처리 얼굴 이미지에서의 얼굴 영역의 삼각 메시를 제작하는 단계(S32)와,
얼굴 키포인트에 대응하는 삼각 메시에 기초하여, 피처리 얼굴 이미지에서의 대상 부위의 위치 좌표를 결정해 표준 소재 이미지를 샘플링하여, 제2 대상 소재를 취득하는 단계(S33)과,
제2 대상 소재에 기초하여, 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 단계(S34)와,
제1 대상 소재가 아이 메이크업 소재, 치크 소재 또는 눈썹 소재 등의 소재인 경우, 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역의 원색과 제2 대상 소재에서의 대응 위치의 화소의 색을 곱셈 모드로 융합시켜, 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하는 단계(S35)와,
제1 대상 소재가 얼굴 윤곽 수정 소재인 경우, 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역의 원색과 제2 대상 소재에서의 대응 위치의 화소의 색을 소프트 라이트 모드로 융합시켜, 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하는 단계(S36)와,
제2 대상 소재의 투명도 및 미리 설정된 융합 강도에 기초하여, 초기 융합 색과 원색의 융합 강도를 결정하고, 대상 부위가 위치하는 영역의 초기 융합 색과 원색을 상기 융합 강도로 융합시켜, 도 10∼도 13에 나타내는 융합 얼굴 이미지를 취득하는 단계(S37)을 포함하는 이미지 처리 방법을 제공한다.
본 발명의 응용예에 따른 방법에서는 2회의 색 융합에 의해, 가장자리부가 점진 효과를 갖고, 또한 사용자의 요망을 충족시키는 보다 진실한 융합 얼굴 이미지를 취득할 수 있다.
본 발명의 응용예에 따른 이미지 처리 방법은 얼굴 이미지에 대해 뷰티 가공 처리를 행하는 것 외에, 다른 타입의 이미지(예를 들면, 인체 이미지나 풍경 이미지 등)에도 적용 가능하고, 이미지의 타입에 따라, 본 발명의 응용예에 따른 이미지 처리 방법은 유연하게 변경되어도 된다.
본 발명에서 언급되는 상기 각 방법의 실시예는 원리와 논리를 위반하지 않는 한, 서로 조합하여 실시예를 형성할 수 있음을 이해해야 한다. 분량에 한계가 있으므로, 본 발명에서는 상세한 설명을 생략한다.
또한, 당업자라면, 구체적인 실시형태에 따른 상기 방법에서는 각 단계의 기재 순서는 실행 순서를 엄밀하게 한정하여 실시의 과정을 한정하는 것이 아니고, 각 단계의 실행 순서가 그 기능과 내부 논리에 의해 구체적으로 결정되는 것을 이해해야 한다.
본 발명의 실시예는 컴퓨터 프로그램 명령이 기억되어 있는 컴퓨터 판독 가능 기억 매체로서, 상기 컴퓨터 프로그램 명령이 프로세서에 의해 실행되면, 상기 방법을 실현하는 컴퓨터 판독 가능 기억 매체를 추가로 제공한다. 컴퓨터 판독 가능 기억 매체는 휘발성 컴퓨터 판독 가능 기억 매체 또는 불휘발성 컴퓨터 판독 가능 기억 매체여도 된다.
본 발명의 실시예는 프로세서와, 프로세서에 의해 실행 가능한 명령을 기억하기 위한 메모리를 포함하고, 상기 프로세서는 상기 방법을 실현하도록 구성되는 전자 기기를 추가로 제공한다.
본 발명의 실시예는 컴퓨터 판독 가능 코드 또는 컴퓨터 판독 가능 코드를 기억하는 불휘발성 컴퓨터 판독 가능 기억 매체를 포함하고, 상기 컴퓨터 판독 가능 코드가 전자 기기에서 실행되면, 상기 전자 기기의 프로세서에 상기 이미지 처리 방법을 실현시키는 컴퓨터 프로그램 제품을 추가로 제공한다.
실제 응용에서, 상기 메모리는 휘발성 메모리(volatile memory)(예를 들면, RAM), 불휘발성 메모리(non-volatile memory)(예를 들면, ROM), 플래시 메모리(flash memory), 하드 디스크 드라이브(Hard Disk Drive, HDD), 솔리드 스테이트 드라이브(Solid State Drive, SSD) 또는 이들의 조합이어도 되고, 명령 및 데이터를 프로세서에 제공한다.
상기 프로세서는 ASIC, DSP, DSPD, PLD, FPGA, CPU, 컨트롤러, 마이크로 컨트롤러, 마이크 프로세서 중 적어도 하나여도 된다. 설비에 따라, 상기 프로세서의 기능을 실현하기 위한 전자 기기는 다른 것이어도 되는 것을 이해해야 한다. 이 점에 대해, 본 발명의 실시예에서는 특별히 한정되지 않는다.
전자 기기는 단말, 서버 또는 다른 형태의 장치로서 제공되어도 된다.
상기 실시예와 동일한 기술적 사상에 의하면, 본 발명의 실시예는 프로세서에 의해 실행되면, 상기 방법을 실현하는 컴퓨터 프로그램을 추가로 제공한다.
도 16은 본 발명의 실시예에 기재된 전자 기기(800)의 블록도이다. 예를 들면, 전자 기기(800)는 휴대 전화, 컴퓨터, 디지털 방송 단말, 메시지 송수신 장치, 게임 콘솔, 태블릿 장치, 의료 기기, 피트니스 기구, 퍼스널 디지털 어시스턴트 등의 단말이어도 된다.
도 16을 참조하면, 전자 기기(800)는 처리 컴포넌트(802), 메모리(804), 전원 컴포넌트(806), 멀티미디어 컴포넌트(808), 오디오 컴포넌트(810), 입력/출력(I/O) 인터페이스(812), 센서 컴포넌트(814) 및 통신 컴포넌트(816) 중 하나 이상을 포함해도 된다.
처리 컴포넌트(802)는 통상, 전자 기기(800)의 전체적인 동작, 예를 들면, 표시, 전화의 호출, 데이터 통신, 카메라 동작 및 기록 동작과 관련된 동작을 제어한다. 처리 컴포넌트(802)는 상기 방법의 전부 또는 일부 단계를 실행하기 위해 명령을 실행하는 하나 이상의 프로세서(820)를 포함해도 된다. 또한, 처리 컴포넌트(802)는 다른 컴포넌트와의 상호 작용을 위한 하나 이상의 모듈을 포함해도 된다. 예를 들면, 처리 컴포넌트(802)는 멀티미디어 컴포넌트(808)와의 상호 작용을 위해 멀티미디어 모듈을 포함해도 된다.
메모리(804)는 전자 기기(800)에서의 동작을 서포트하기 위한 다양한 타입의 데이터를 기억하도록 구성된다. 이들 데이터는 예로서, 전자 기기(800)에서 조작하는 임의의 애플리케이션 프로그램 또는 방법의 명령, 연락처 데이터, 전화 번호부 데이터, 메시지, 사진, 비디오 등을 포함한다. 메모리(804)는 예를 들면, 정적 랜덤 액세스 메모리(SRAM), 전기적 소거 가능 프로그래머블 판독 전용 메모리(EEPROM), 소거 가능 프로그래머블 판독 전용 메모리(EPROM), 프로그래머블 판독 전용 메모리(PROM), 판독 전용 메모리(ROM), 자기 메모리, 플래시 메모리, 자기 디스크 또는 광 디스크 등의 다양한 타입의 휘발성 또는 불휘발성 기억 장치 또는 이들의 조합에 의해 실현할 수 있다.
전원 컴포넌트(806)는 전자 기기(800)의 각 컴포넌트에 전력을 공급한다. 전원 컴포넌트(806)는 전원 관리 시스템, 하나 이상의 전원, 및 전자 기기(800)를 위한 전력 생성, 관리 및 배분과 관련된 다른 컴포넌트를 포함해도 된다.
멀티미디어 컴포넌트(808)는 상기 전자 기기(800)와 사용자 사이에서 출력 인터페이스를 제공하는 스크린을 포함한다. 몇 개의 실시예에서는 스크린은 액정 디스플레이(LCD) 및 터치 패널(TP)을 포함해도 된다. 스크린이 터치 패널을 포함하는 경우, 사용자로부터의 입력 신호를 수신하는 터치 스크린으로서 실현해도 된다. 터치 패널은 터치, 슬라이드 및 터치 패널에서의 제스처를 검지하도록 하나 이상의 터치 센서를 포함한다. 상기 터치 센서는 터치 또는 슬라이드 동작의 경계를 검지할 뿐만 아니라, 상기 터치 또는 슬라이드 조작과 관련된 지속 시간 및 압력을 검출하도록 해도 된다. 몇 개의 실시예에서는 멀티미디어 컴포넌트(808)는 전면 카메라 및/또는 배면 카메라를 포함한다. 전자 기기(800)가 동작 모드, 예를 들면, 촬영 모드 또는 촬상 모드인 경우, 전면 카메라 및/또는 배면 카메라는 외부 멀티미디어 데이터를 수신하도록 해도 된다. 각 전면 카메라 및 배면 카메라는 고정된 광학 렌즈계 또는 초점 거리 및 광학 줌 능력을 갖는 것이어도 된다.
오디오 컴포넌트(810)는 오디오 신호를 출력 및/또는 입력하도록 구성된다. 예를 들면, 오디오 컴포넌트(810)는 하나의 마이크(MIC)를 포함하고, 마이크(MIC)는 전자 기기(800)가 동작 모드, 예를 들면, 호출 모드, 기록 모드 및 음성 식별 모드가 되는 경우, 외부의 오디오 신호를 수신하도록 구성된다. 수신된 오디오 신호는 추가로, 메모리(804)에 기억되거나, 또는 통신 컴포넌트(816)를 통해 송신되어도 된다. 몇 개의 실시예에서는 오디오 컴포넌트(810)는 추가로, 오디오 신호를 출력하기 위한 스피커를 포함한다.
I/O 인터페이스(812)는 처리 컴포넌트(802)와 주변 인터페이스 모듈 사이에서 인터페이스를 제공하고, 상기 주변 인터페이스 모듈은 키보드, 클릭 휠, 버튼 등이어도 된다. 이들 버튼은 홈 버튼, 음량 버튼, 시작 버튼 및 잠금 버튼을 포함해도 되지만, 이들에 한정되지 않는다.
센서 컴포넌트(814)는 전자 기기(800)의 각 측면의 상태 평가를 위해 하나 이상의 센서를 포함한다. 예를 들면, 센서 컴포넌트(814)는 전자 기기(800)의 온/오프 상태, 예를 들면, 전자 기기(800)의 표시 장치 및 키패드와 같은 컴포넌트의 상대적 위치 결정을 검출할 수 있고, 센서 컴포넌트(814)는 추가로, 전자 기기(800) 또는 전자 기기(800)의 특정 컴포넌트의 위치 변화, 사용자와 전자 기기(800)의 접촉 유무, 전자 기기(800)의 방위 또는 가감속 및 전자 기기(800)의 온도 변화를 검출할 수 있다. 센서 컴포넌트(814)는 어떠한 물리적 접촉도 없는 경우에 근방의 물체의 존재를 검출하도록 구성되는 근접 센서를 포함해도 된다. 센서 컴포넌트(814)는 추가로, CMOS 또는 CCD 이미지 센서와 같은, 이미징 애플리케이션에서 사용하기 위한 광 센서를 포함해도 된다. 몇 개의 실시예에서는 상기 센서 컴포넌트(814)는, 추가로 가속도 센서, 자이로 센서, 자기 센서, 압력 센서 또는 온도 센서를 추가로 포함해도 된다.
통신 컴포넌트(816)는 전자 기기(800)와 다른 기기의 유선 또는 무선 통신을 실현하도록 구성된다. 전자 기기(800)는 통신 규격에 기초한 무선 네트워크, 예를 들어 WiFi, 2G 또는 3G, 또는 이들의 조합에 액세스할 수 있다. 일 예시적 실시예에서는 통신 컴포넌트(816)는 방송 채널을 통해 외부의 방송 관리 시스템으로부터의 방송 신호 또는 방송 관련자 정보를 수신한다. 일 예시적 실시예에서는 상기 통신 컴포넌트(816)는 추가로, 근거리 통신을 촉진시키기 위해, 근거리 무선 통신(NFC) 모듈을 포함한다. 예를 들면, NFC 모듈은 무선 주파수 식별(RFID) 기술, 적외선 데이터 협회(IrDA) 기술, 초광대역(UWB) 기술, 블루투스(BT) 기술 및 기타 기술에 의해 실현할 수 있다.
예시적인 실시예에서는 전자 기기(800)는 하나 이상의 특정 용도 집적 회로(ASIC), 디지털 신호 프로세서(DSP), 디지털 시그널 프로세서(DSPD), 프로그래머블 로직 디바이스(PLD), 필드 프로그래머블 게이트 어레이(FPGA), 컨트롤러, 마이크로 컨트롤러, 마이크로 프로세서 또는 기타 전자 요소에 의해 실현되며, 상기 방법을 실행하기 위해 사용될 수 있다.
예시적인 실시예에서는 추가로, 불휘발성 컴퓨터 판독 가능 기억 매체, 예를 들면, 컴퓨터 프로그램 명령을 포함하는 메모리(804)가 제공되고, 상기 컴퓨터 프로그램 명령은 전자 기기(800)의 프로세서(820)에 의해 실행되면 상기 방법을 실행시킬 수 있다.
도 17은 본 발명의 실시예에 기재된 전자 기기(1900)의 블록도이다. 예를 들면, 전자 기기(1900)는 서버로서 제공되어도 된다. 도 17을 참조하면, 전자 기기(1900)는 하나 이상의 프로세서를 포함하는 처리 컴포넌트(1922) 및 처리 컴포넌트(1922)에 의해 실행 가능한 명령, 예를 들면, 애플리케이션 프로그램을 기억하기 위한, 메모리(1932)를 대표로 하는 메모리 자원을 포함한다. 메모리(1932)에 기억되어 있는 애플리케이션 프로그램은 각각이 하나의 명령군에 대응하는 하나 이상의 모듈을 포함해도 된다. 또한, 처리 컴포넌트(1922)는 명령을 실행함으로써 상기 방법을 실행하도록 구성된다.
전자 기기(1900)는 추가로, 전자 기기(1900)의 전원 관리를 실행하도록 구성되는 전원 컴포넌트(1926), 전자 기기(1900)를 네트워크에 접속하도록 구성되는 유선 또는 무선 네트워크 인터페이스(1950) 및 입출력(I/O) 인터페이스(1958)를 포함해도 된다. 전자 기기(1900)는 메모리(1932)에 기억되어 있는 오퍼레이팅 시스템, 예를 들면, Windows ServerTM, Mac OS XTM, UnixTM, LinuxTM, FreeBSDTM 또는 유사한 것에 기초하여 동작할 수 있다.
예시적인 실시예에서는 추가로, 불휘발성 컴퓨터 판독 가능 기억 매체, 예를 들면, 컴퓨터 프로그램 명령을 포함하는 메모리(1932)가 제공되고, 상기 컴퓨터 프로그램 명령은 전자 기기(1900)의 처리 컴포넌트(1922)에 의해 실행되면, 상기 방법을 실행시킬 수 있다.
본 발명은 시스템, 방법 및/또는 컴퓨터 프로그램 제품이어도 된다. 컴퓨터 프로그램 제품은 프로세서가 본 발명의 각 측면을 실현시키 위한 컴퓨터 판독 가능 프로그램 명령이 갖고 있는 컴퓨터 판독 가능 기억 매체를 포함해도 된다.
컴퓨터 판독 가능 기억 매체는 명령 실행 기기에 사용되는 명령을 저장 및 기억 가능한 유형의 장치여도 된다. 컴퓨터 판독 가능한 기억 매체는 예를 들면, 전기 기억 장치, 자기 기억 장치, 광 기억 장치, 전자 기억 장치, 반도체 기억 장치, 또는 상기 임의의 적당한 조합이어도 되지만, 이들에 한정되지 않는다. 컴퓨터 판독 가능한 기억 매체의 보다 구체적인 예(비망라적 리스트)로는 휴대형 컴퓨터 디스크, 하드 디스크, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 소거 가능 프로그래머블 판독 전용 메모리(EPROM 또는 플래시 메모리), 정적 랜덤 액세스 메모리(SRAM), 휴대형 컴팩트 디스크 판독 전용 메모리(CD-ROM), 디지털 다용도 디스크(DVD), 메모리 스틱, 플로피 디스크, 예를 들면, 명령이 기억되어 있는 천공 카드 또는 슬롯 내 돌기 구조와 같은 기계적 부호화 장치, 및 상기 임의의 적당한 조합을 포함한다. 여기서 사용되는 컴퓨터 판독 가능 기억 매체는 순시 신호 자체, 예를 들면, 무선 전파 또는 기타 자유롭게 전파되는 전자파, 도파로 또는 다른 전송 매체를 경유하여 전파되는 전자파(예를 들면, 광 파이버 케이블을 통과시키는 광 펄스) 또는 전선을 경유하여 전송되는 전기 신호로 해석되는 것은 아니다.
여기서 기술한 컴퓨터 판독 가능 프로그램 명령은 컴퓨터 판독 가능 기억 매체에서 각 계산/처리 기기로 다운로드되어도 되거나, 또는 네트워크, 예를 들면, 인터넷, 로컬 에어리어 네트워크, 광역 네트워크 및/또는 무선 네트워크를 통해 외부 컴퓨터 또는 외부 기억 장치로 다운로드되어도 된다. 네트워크는 구리 전송 케이블, 광파이버 전송, 무선 전송, 라우터, 파이어 월, 교환기, 게이트웨이 컴퓨터 및/또는 에지 서버를 포함해도 된다. 각 계산/처리 기기 내의 네트워크 어댑터 카드 또는 네트워크 인터페이스는 네트워크에서 컴퓨터 판독 가능 프로그램 명령을 수신하고, 상기 컴퓨터 판독 가능 프로그램 명령을 전송하고, 각 계산/처리 기기 내의 컴퓨터 판독 가능 기억 매체에 기억시킨다.
본 발명의 동작을 실행하기 위한 컴퓨터 프로그램 명령은 어셈블리 명령, 명령어 세트 아키텍처(ISA) 명령, 기계어 명령, 기계 의존 명령, 마이크로 코드, 펌웨어 명령, 상태 설정 데이터, 또는 Smalltalk, C++ 등의 오브젝트 지향 프로그래밍 언어, 및 「C」 언어 또는 유사한 프로그래밍 언어 등의 일반적인 절차형 프로그래밍 언어를 포함하는 하나 이상의 프로그래밍 언어의 임의의 조합으로 제작된 소스 코드 또는 목표 코드여도 된다. 컴퓨터 판독 가능한 프로그램 명령은 완전히 사용자의 컴퓨터에서 실행되어도 되고, 부분적으로 사용자의 컴퓨터에서 실행되어도 되고, 독립형 소프트웨어 패키지로서 실행되어도 되고, 부분적으로 사용자의 컴퓨터에서 또한 부분적으로 리모트 컴퓨터에서 실행되어도 되고, 또는 완전히 리모트 컴퓨터 혹은 서버에서 실행되어도 된다. 리모트 컴퓨터에 관한 경우, 리모트 컴퓨터는 로컬 에어리어 네트워크(LAN) 또는 광역 네트워크(WAN)를 포함하는 임의의 종류의 네트워크를 경유하여 사용자의 컴퓨터에 접속되어도 되고, 또는 (예를 들면, 인터넷 서비스 프로바이더를 이용하여 인터넷을 경유하여) 외부 컴퓨터에 접속되어도 된다. 몇 개의 실시예에서는 컴퓨터 판독 가능 프로그램 명령의 상태자 정보를 이용하여, 예를 들면, 프로그래머블 논리 회로, 필드 프로그래머블 게이트 어레이(FPGA) 또는 프로그래머블 논리 어레이(PLA) 등의 전자 회로를 개인화하고, 상기 전자 회로에 의해 컴퓨터 판독 가능 프로그램 명령을 실행함으로써, 본 발명의 각 측면을 실현하도록 해도 된다.
본 발명의 실시예에 따른 방법, 장치(시스템) 및 컴퓨터 프로그램 제품의 흐름도 및/또는 블록도를 참조하여 본 발명의 각 양태를 설명 하였지만, 흐름도 및/또는 블록도의 각 블록 및 흐름도 및/또는 블록도의 각 블록의 조합은 모두 컴퓨터 판독가능한 프로그램 명령에 의해 실현될 수 있음을 이해해야 한다.
이들 컴퓨터 판독 가능 프로그램 명령은 범용 컴퓨터, 전용 컴퓨터 또는 다른 프로그래머블 데이터 처리 장치의 프로세서에 제공되고, 이들 명령이 컴퓨터 또는 다른 프로그래머블 데이터 처리 장치의 프로세서에 의해 실행되면, 흐름도 및/또는 블록도 중 하나 이상의 블록에서 지정된 기능/동작을 실현하도록 장치를 제조해도 된다. 이들 컴퓨터 판독 가능 프로그램 명령은 컴퓨터 판독 가능 기억 매체에 기억되고, 컴퓨터, 프로그래머블 데이터 처리 장치 및/또는 다른 기기가 특정 방식으로 동작시키도록 해도 된다. 이에 의해, 명령이 기억되어 있는 컴퓨터 판독 가능 기억 매체는 흐름도 및/또는 블록도 중 하나 이상의 블록에서 지정된 기능/동작의 각 측면을 실현하는 명령을 갖는 제품을 포함한다.
컴퓨터 판독 가능 프로그램 명령은 컴퓨터, 다른 프로그래머블 데이터 처리 장치 또는 다른 장치에 로딩되고, 컴퓨터, 다른 프로그래머블 데이터 처리 장치 또는 다른 기기에 일련의 동작 단계를 실행시킴으로써, 컴퓨터에 의해 실시할 수 있는 프로세스를 생성하도록 해도 된다. 이렇게 하여 컴퓨터, 다른 프로그래머블 데이터 처리 장치, 또는 다른 기기에서 실행되는 명령에 의해, 흐름도 및/또는 블록도 중 하나 이상의 블록에서 지정된 기능/동작을 실현한다.
도면 중 흐름도 및 블록도는 본 발명의 복수의 실시예에 따른 시스템, 방법 및 컴퓨터 프로그램 제품의 실현 가능한 시스템 아키텍처, 기능 및 동작을 나타낸다. 이 점에서는 흐름도 또는 블록도에서의 각 블록은 하나의 모듈, 프로그램 세그먼트 또는 명령의 일부를 대표할 수 있고, 상기 모듈, 프로그램 세그먼트 또는 명령의 일부는 지정된 논리 기능을 실현하기 위한 하나 이상의 실행 가능 명령을 포함한다. 일부 대체로서의 실현형태에서는 블록에 표기되는 기능은 도면에 기재된 순서와 상이하게 실현되어도 된다. 예를 들면, 연속적인 두 개의 블록은 실질적으로 병렬로 실행되어도 되고, 또한, 이러한 기능에 의해 반대 순서로 실행해도 된다. 또한, 블록도 및/또는 흐름도에서의 각 블록 및 블록도 및/또는 흐름도에서의 블록의 조합은 지정되는 기능 또는 동작을 실행하는 하드웨어에 기초한 전용 시스템에 의해 실현해도 되고, 또는 전용 하드웨어와 컴퓨터 명령의 조합에 의해 실현해도 되는 것에도 주의해야 한다.
이상, 본 발명의 각 실시예를 기술했지만, 상기 설명은 예시적인 것에 불과하고, 망라적인 것이 아니며, 또한 개시된 각 실시예에 한정되는 것도 아니다. 당업자라면, 설명된 각 실시예의 범위 및 정신에서 벗어나지 않고 다양한 수정 및 변경이 자명하다. 본 명세서에서 선택된 용어는 각 실시예의 원리, 실제 적용 또는 기존 기술에 대한 개선을 적절하게 해석하거나, 또는 다른 당업자에게 본문에 개시된 각 실시예를 이해하도록 하기 위한 것이다.

Claims (14)

  1. 피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 것과,
    상기 제2 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 상기 대상 부위의 이미지 영역을 결정하는 것과,
    상기 제2 대상 소재의 색에 기초하여, 상기 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 것을 포함하는, 이미지 처리 방법.
  2. 제 1 항에 있어서,
    상기 피처리 얼굴 이미지에서의 대상 부위를 식별하여 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 것을 추가로 포함하고,
    상기한, 선택된 제1 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 것은
    상기 선택된 제1 대상 소재와 미리 설정된 얼굴 이미지에서의 대상 부위를 융합시켜 표준 소재 이미지를 취득하는 것과,
    상기 초기 위치에 기초하여 상기 표준 소재 이미지에서 제2 대상 소재를 추출하는 것을 포함하는, 이미지 처리 방법.
  3. 제 2 항에 있어서,
    상기한, 상기 피처리 얼굴 이미지에서의 대상 부위를 식별하여 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 취득하는 것은
    상기 피처리 얼굴 이미지에서 하나 이상의 얼굴 키포인트를 취득하는 것과,
    상기 얼굴 키포인트에 기초하여, 상기 피처리 얼굴 이미지에서 상기 대상 부위에 대응하는 삼각 메시를 제작하는 것과,
    상기 삼각 메시의 위치 좌표에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위의 초기 위치를 결정하는 것을 포함하는, 이미지 처리 방법.
  4. 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,
    상기한, 상기 제2 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 상기 대상 부위의 이미지 영역을 결정하는 것은
    상기 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것을 포함하는, 이미지 처리 방법.
  5. 제 4 항에 있어서,
    상기한, 상기 제2 대상 소재의 하나 이상의 화소점의 투명도에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위의 이미지 영역을 결정하는 것은
    상기 제2 대상 소재의 화소점의 투명도가 미리 설정된 투명도 범위에 있는 경우, 상기 피처리 얼굴 이미지에서의 상기 화소점의 위치에 대응하는 영역을 상기 대상 부위의 이미지 영역으로서 결정하는 것을 포함하는, 이미지 처리 방법.
  6. 제 1 항 내지 제 5 항 중 어느 한 항에 있어서,
    상기한, 상기 제2 대상 소재의 색에 기초하여, 상기 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여 융합 얼굴 이미지를 취득하는 것은
    상기 대상 부위의 원색을 취득하는 것과,
    상기 뷰티 가공 조작으로 선택된 처리 타입에 따라 상기 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 대상 부위의 색이 초기 융합 색이 되는 초기 융합 얼굴 이미지를 취득하는 것과,
    상기 원색과 상기 초기 융합 색의 제2 융합 처리를 행하여 융합 얼굴 이미지를 취득하는 것을 포함하는, 이미지 처리 방법.
  7. 제 6 항에 있어서,
    상기 처리 타입은 아이 메이크업 처리, 치크 메이크업 처리 및 눈썹 메이크업 처리 중 하나 이상을 포함하고,
    상기한, 상기 뷰티 가공 조작으로 선택된 처리 타입에 따라, 상기 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 초기 융합 얼굴 이미지를 취득하는 것은
    상기 원색과 상기 제2 대상 소재의 색을 곱셈 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것을 포함하는, 이미지 처리 방법.
  8. 제 6 항 또는 제 7 항에 있어서,
    상기 처리 타입은 윤곽 수정 처리를 포함하고,
    상기한, 상기 뷰티 가공 조작으로 선택된 처리 타입에 따라, 상기 원색과 상기 제2 대상 소재의 색의 제1 융합 처리를 행하여, 초기 융합 얼굴 이미지를 취득하는 것은
    상기 원색과 상기 제2 대상 소재의 색을 소프트 라이트 모드로 융합시켜 초기 융합 얼굴 이미지를 취득하는 것을 포함하는, 이미지 처리 방법.
  9. 제 6 항 내지 제 8 항 중 어느 한 항에 있어서,
    상기한, 상기 원색과 상기 초기 융합 색의 제2 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 것은
    상기 제2 대상 소재의 하나 이상의 화소점의 투명도 및 미리 설정된 융합 강도에 기초하여, 상기 원색과 상기 초기 융합 색의 융합 가중치 각각을 결정하는 것과,
    상기 원색과 상기 초기 융합 색을 각각의 상기 융합 가중치로 융합시켜 융합 얼굴 이미지를 취득하는 것을 포함하는, 이미지 처리 방법. .
  10. 제 1 항 내지 제 9 항 중 어느 한 항에 있어서,
    상기 제1 대상 소재는 속눈썹 소재, 아이라인 소재, 아이섀도 소재, 치크 소재, 눈썹 소재 및 얼굴 윤곽 수정 소재 중 하나 이상을 포함하는, 이미지 처리 방법.
  11. 피처리 얼굴 이미지의 뷰티 가공 조작에 따라, 선택된 제1 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 대상 부위에 대응하는 제2 대상 소재를 생성하는 소재 생성 모듈과,
    상기 제2 대상 소재에 기초하여, 상기 피처리 얼굴 이미지에서의 상기 대상 부위의 이미지 영역을 결정하는 대상 부위 결정 모듈과,
    상기 제2 대상 소재의 색에 기초하여, 상기 대상 부위의 이미지 영역에 대한 색의 융합 처리를 행하여, 융합 얼굴 이미지를 취득하는 융합 모듈을 구비하는, 이미지 처리 장치.
  12. 프로세서와,
    프로세서에 의해 실행 가능한 명령을 기억하기 위한 메모리를 포함하고,
    상기 프로세서는 상기 메모리에 기억되어 있는 명령을 불러내어 제 1 항 내지 제 10 항 중 어느 한 항의 이미지 처리 방법을 실행하도록 구성되는, 전자 기기.
  13. 컴퓨터 프로그램 명령이 기억되어 있는 컴퓨터 판독 가능 기억 매체로서,
    상기 컴퓨터 프로그램 명령은 프로세서에 의해 실행되면, 제 1 항 내지 제 10 항 중 어느 한 항의 이미지 처리 방법을 실현시키는, 컴퓨터 판독 가능 기억 매체.
  14. 컴퓨터 판독 가능 코드 또는 컴퓨터 판독 가능 코드를 기억하는 불휘발성 컴퓨터 판독 가능 기억 매체를 포함하고, 상기 컴퓨터 판독 가능 코드가 전자 기기의 프로세서에서 실행되면, 상기 전자 기기의 프로세서에 제 1 항 내지 제 10 항 중 어느 한 항의 이미지 처리 방법을 실현시키는, 컴퓨터 프로그램 제품.
KR1020237030354A 2021-02-23 2021-06-29 이미지 처리 방법, 장치, 전자 기기 및 기억 매체 KR20230147649A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202110204094.4 2021-02-23
CN202110204094.4A CN112766234B (zh) 2021-02-23 2021-02-23 图像处理方法及装置、电子设备和存储介质
PCT/CN2021/103246 WO2022179025A1 (zh) 2021-02-23 2021-06-29 图像处理方法及装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
KR20230147649A true KR20230147649A (ko) 2023-10-23

Family

ID=82900724

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020237030354A KR20230147649A (ko) 2021-02-23 2021-06-29 이미지 처리 방법, 장치, 전자 기기 및 기억 매체

Country Status (4)

Country Link
US (1) US20220270313A1 (ko)
EP (1) EP4075326A4 (ko)
JP (1) JP2024508267A (ko)
KR (1) KR20230147649A (ko)

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107204034B (zh) * 2016-03-17 2019-09-13 腾讯科技（深圳）有限公司 一种图像处理方法及终端
JP6731616B2 (ja) * 2016-06-10 2020-07-29 パナソニックＩｐマネジメント株式会社 バーチャルメイク装置、バーチャルメイク方法、およびバーチャルメイクプログラム
TWI573093B (zh) * 2016-06-14 2017-03-01 Asustek Comp Inc 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體
US10373348B2 (en) * 2016-08-05 2019-08-06 Optim Corporation Image processing apparatus, image processing system, and program
US11120495B2 (en) * 2016-09-15 2021-09-14 GlamST LLC Generating virtual makeup products
US11315173B2 (en) * 2016-09-15 2022-04-26 GlamST LLC Applying virtual makeup products
WO2018159231A1 (ja) * 2017-02-28 2018-09-07 パナソニックＩｐマネジメント株式会社 メイクシミュレーション装置、方法、及び、非一時的な記憶媒体
EP3652701A4 (en) * 2017-07-13 2021-11-03 Shiseido Company, Limited VIRTUAL FACE MAKEUP REMOVAL, FAST FACE RECOGNITION AND LANDMARK TRACKING
US10395436B1 (en) * 2018-03-13 2019-08-27 Perfect Corp. Systems and methods for virtual application of makeup effects with adjustable orientation view
CN109859098B (zh) * 2019-01-15 2022-11-22 深圳市云之梦科技有限公司 人脸图像融合方法、装置、计算机设备及可读存储介质
CN113496459A (zh) * 2020-04-01 2021-10-12 华为技术有限公司 辅助化妆方法、终端设备、存储介质及程序产品
EP4136622A1 (en) * 2020-06-24 2023-02-22 Google LLC Applying stored digital makeup enhancements to recognized faces in digital images
US11798202B2 (en) * 2020-09-28 2023-10-24 Snap Inc. Providing augmented reality-based makeup in a messaging system
US20220179498A1 (en) * 2020-12-09 2022-06-09 Perfect Mobile Corp. System and method for gesture-based image editing for self-portrait enhancement
US11657553B2 (en) * 2020-12-30 2023-05-23 L'oreal Digital makeup artist
US20220202168A1 (en) * 2020-12-30 2022-06-30 L'oreal Digital makeup palette
US11461946B2 (en) * 2020-12-30 2022-10-04 L'oreal Digital makeup artist

Also Published As

Publication number Publication date
JP2024508267A (ja) 2024-02-26
US20220270313A1 (en) 2022-08-25
EP4075326A4 (en) 2022-12-14
EP4075326A1 (en) 2022-10-19

Similar Documents

Publication Publication Date Title
CN112767285B (zh) 图像处理方法及装置、电子设备和存储介质
CN112766234B (zh) 图像处理方法及装置、电子设备和存储介质
CN113160094A (zh) 图像处理方法及装置、电子设备和存储介质
JP6923682B2 (ja) 顔画像の処理方法および装置、電子機器ならびに記憶媒体
EP3905662A1 (en) Image processing method and apparatus, electronic device and storage medium
CN111553864A (zh) 图像修复方法及装置、电子设备和存储介质
CN109472738B (zh) 图像光照校正方法及装置、电子设备和存储介质
US10803988B2 (en) Color analysis and control using a transparent display screen on a mobile device with non-transparent, bendable display screen or multiple display screen with 3D sensor for telemedicine diagnosis and treatment
KR20220149503A (ko) 이미지 촬영 방법 및 장치, 전자 기기 및 컴퓨터 판독 가능한 저장 매체
WO2023142645A1 (zh) 图像处理方法、装置、电子设备、存储介质和计算机程序产品
CN111091610A (zh) 图像处理方法及装置、电子设备和存储介质
CN113763286A (zh) 图像处理方法及装置、电子设备和存储介质
CN111724361A (zh) 实时显示病灶的方法及装置、电子设备和存储介质
CN112613447A (zh) 关键点检测方法及装置、电子设备和存储介质
WO2023045946A1 (zh) 图像处理方法及装置、电子设备和存储介质
CN113781359B (zh) 图像处理方法及装置、电子设备和存储介质
KR20230147649A (ko) 이미지 처리 방법, 장치, 전자 기기 및 기억 매체
CN115936998A (zh) 图片拼接方法、装置、电子设备以及存储介质
CN113870400A (zh) 虚拟对象的生成方法及装置、电子设备和存储介质
CN110796630B (zh) 图像处理方法及装置、电子设备和存储介质
CN114266305A (zh) 对象识别方法及装置、电子设备和存储介质
CN111078346B (zh) 一种目标对象显示方法及装置、电子设备和存储介质
CN111754635A (zh) 纹理融合方法及装置、电子设备和存储介质
CN113762212B (zh) 图像处理方法及装置、电子设备和存储介质
CN116149519A (zh) 多媒体设备的画面切换方法、设备、存储介质及多媒体设备