CN112640412B - 图像处理装置、方法及记录介质 - Google Patents

图像处理装置、方法及记录介质 Download PDF

Info

Publication number
CN112640412B
CN112640412B CN201980057076.9A CN201980057076A CN112640412B CN 112640412 B CN112640412 B CN 112640412B CN 201980057076 A CN201980057076 A CN 201980057076A CN 112640412 B CN112640412 B CN 112640412B
Authority
CN
China
Prior art keywords
image
attribute information
subject
processing apparatus
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980057076.9A
Other languages
English (en)
Other versions
CN112640412A (zh
Inventor
板垣和幸
狩野乔俊
大关诚
林伸治
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN112640412A publication Critical patent/CN112640412A/zh
Application granted granted Critical
Publication of CN112640412B publication Critical patent/CN112640412B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/10—Selection of transformation methods according to the characteristics of the input images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/60—Rotation of whole images or parts thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/66—Transforming electric information into light information

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明的图像处理装置实现将从图像提取的对象布局到其他图像的工作的效率化，并减轻进行该操作的用户的负担。在S6中，第2图像属性信息提取部(15)提取第2图像的属性信息。在S7中，布局确定部(16)根据对象属性信息、对象周围属性信息及第2图像属性信息，确定第2图像中的对象的合成位置。在S8中，校正部(17)根据对象属性信息、对象周围属性信息及第2图像属性信息，对所提取的对象及第2图像中的至少一个进行校正。在S9中，合成部(18)创建将对象(若已校正对象，则是已校正的对象)合成到第2图像(若已校正第2图像，则是已校正的第2图像)的合成位置而成的合成图像。在S10中，显示控制部(20)以将合成图像显示于显示部(19)的方式进行控制。

Description

图像处理装置、方法及记录介质
技术领域
本发明涉及一种图像处理装置、方法及程序，尤其涉及一种将从图像提取的对象布局到其他图像的图像处理装置、方法及程序。
背景技术
以往，存在自动或通过用户操作从图像提取任意对象的技术及进行将从图像提取的对象粘贴到其他图像的布局的图像编辑技术。
专利文献1中记载有如下内容，即，从拍摄名片而得的图像提取标志标记，从标志标记判断属性(姓名、地址、公司名)，对所提取的字符信息进行校正，由此提高字符的识别精度。
专利文献2中公开有如下内容，即，从照片提取面部部分，结合本人的特征对面部部分进行夸张校正，并合成为素材信息(名人的面部等)。
另外，作为与本申请发明相关联的技术，可举出专利文献3及4。
以往技术文献
专利文献
专利文献1：日本特开2008-282094号公报
专利文献2：日本特开2005-228185号公报
专利文献3：日本专利5636807号公报
专利文献4：日本特开平6-342457号公报
发明内容
发明要解决的技术课题
从图像提取对象的操作、编辑所提取的对象的操作或将已编辑的对象配置于其他图像的任意位置的操作很难利用画面较小的智能手机等移动信息终端进行。
提供伴有这种操作的应用程序或网络服务时，若不减轻用户的工作量，则用户的负担增加，减少利用服务的乐趣，因此会导致用户不会利用这种应用程序或网络服务。
专利文献1～4中，均将台式电脑上的操作作为前提，并未公开在画面较小的移动信息终端中减轻操作负担的技术。
本发明是鉴于这种问题点而完成的，其目的在于提供一种能够实现将从图像提取的对象布局到其他图像的操作的效率化，并减少进行该操作的用户的负担的图像处理装置、方法及程序。
用于解决技术课题的手段
本申请发明的第1方式所涉及的图像处理装置是一种将从第1图像提取的对象合成到第2图像的图像处理装置，其具备：属性信息获取部，获取作为对象的属性信息的第1属性信息、作为对象周围的属性信息的周围属性信息及作为第2图像的属性信息的第2属性信息；确定部，根据第1属性信息、周围属性信息及第2属性信息，确定将对象合成到第2图像时的布局；校正部，根据由确定部确定的布局、第1属性信息、周围属性信息及第2属性信息，对第2图像及对象中的至少一个进行校正；及合成部，根据由确定部确定的布局，将对象合成到第2图像。
本申请发明的第2方式所涉及的图像处理装置中，周围属性信息包括第1图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜、尺寸、对象在第1图像的被摄体上的位置及对象周围的被摄体的颜色中的至少1个，第2属性信息包括第2图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜、尺寸及被摄体的颜色中的至少1个。
本申请发明的第3方式所涉及的图像处理装置中，确定部根据第1图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜与第2图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜之间的差分，确定使对象旋转和/或变形的布局。
本申请发明的第4方式所涉及的图像处理装置中，使对象旋转和/或变形的布局通过射影变换来进行。
本申请发明的第5方式所涉及的图像处理装置中，确定部确定对象在第2图像的被摄体上的位置与对象在第1图像的被摄体上的位置相匹配的布局。
本申请发明的第6方式所涉及的图像处理装置中，第1图像的被摄体上的位置包括第1图像的被摄体的面部的前额及脸颊中的至少1个，第2图像的被摄体上的位置包括第2图像的被摄体的面部的前额及脸颊中的至少1个。
本申请发明的第7方式所涉及的图像处理装置中，校正部根据第1图像的被摄体的尺寸与第2图像的被摄体的尺寸之间的差分，放大或缩小对象的尺寸，由此对对象进行校正。
本申请发明的第8方式所涉及的图像处理装置中，校正部将对象的颜色校正为与第2图像的颜色相匹配的颜色。
本申请发明的第9方式所涉及的图像处理装置中，校正部以与配置于第2图像的对象的周围属性相匹配的方式对对象进行校正。
本申请发明的第10方式所涉及的图像处理装置中，配置于第2图像的对象的周围属性包括光泽及反射率中的至少1个，校正部通过根据对象的周围属性对对象附加镜像来对对象进行校正。
本申请发明的第11方式所涉及的图像处理装置中，校正部以使第2图像的属性与对象的属性相匹配的方式对第2图像进行校正。
本申请发明的第12方式所涉及的图像处理装置中，对象的属性包括字符的模糊。
本申请发明的第13方式所涉及的图像处理装置中，对象包括字符及图案中的至少一个。
本申请发明的第14方式所涉及的图像处理方法是一种由计算机将从第1图像提取的对象合成到第2图像的图像处理方法，所述图像处理方法中执行如下步骤：获取作为对象的属性信息的第1属性信息、作为对象周围的属性信息的周围属性信息及作为第2图像的属性信息的第2属性信息的步骤；根据第1属性信息、周围属性信息及第2属性信息，确定将对象合成到第2图像时的布局的步骤；根据所述布局、第1属性信息、周围属性信息及第2属性信息，对第2图像及对象中的至少一个进行校正的步骤；及根据所述布局，将对象合成到第2图像的步骤。
本申请发明的第15方式所涉及的图像处理程序是用于使计算机执行第14方式所涉及的图像处理方法的程序。
发明效果
本发明根据第1属性信息、周围属性信息及第2属性信息，确定将对象合成到第2图像时的布局，并且根据由确定部确定的布局、第1属性信息、周围属性信息及第2属性信息，对第2图像及对象中的至少一个进行校正。因此，用户无需通过目视确认第1图像的对象和第2图像的属性信息并通过手动进行校正，能够实现将从图像提取的对象布局到其他图像的操作的效率化，并减轻进行该操作的用户的负担。
附图说明
图1是图像处理装置100的框结构图。
图2是表示第1图像的一例的图。
图3是表示对象属性信息表T1的一例的图。
图4是表示对象属性信息表T2的一例的图。
图5是表示第2图像的一例的图。
图6是表示第2图像属性信息表T3的一例的图。
图7是表示对象合成处理的流程的流程图。
图8是表示对第2图像中的对象OBJ1进行了黑白反转之后的对象obj1的合成位置的一例的图。
图9是表示对第2图像中的对象OBJ2进行仿射变换之后的对象obj2的合成位置的一例的图。
图10是表示合成有对象”ABCDEFG”的标志的图像的摄影场景的一例的图。
图11是表示合成有对对象”ABCDEFG”的标志OBJ3进行了黑白反转之后的对象obj3的图像的摄影场景的一例的图。
图12是表示已实施将对标志OBJ4进行了镜面反射的状态的装饰图像附加到对象OBJ4的校正之后的对象obj4的合成的一例的图。
图13是表示已进行与“快速”的对象obj5的运动物体抖动相对应而对第2图像的“新干线”的被摄体OBJ6赋予了“运动物体抖动”的图像修饰的校正之后的对象obj6的一例的图。
具体实施方式
图1是本发明的优选实施方式所涉及的图像处理装置的框图。图像处理装置100具备：第1图像获取部11、第2图像获取部12、对象提取部13、对象属性信息提取部14、第2图像属性信息提取部15、布局确定部16、校正部17、合成部18、显示部19、显示控制部20、属性信息数据库(Database，简称为DB)21。
图像处理装置100本身典型地能够由智能手机、平板电脑、笔记本电脑等便携式信息处理终端构成，但也可以由台式计算机构成。
第1图像获取部11、第2图像获取部12、对象提取部13、对象属性信息提取部14、第2图像属性信息提取部15、布局确定部16、校正部17、合成部18可以由1台或多台计算机(处理器)构成。处理器包括CPU(中央处理器，Central Processing Unit)、ASIC(专用集成电路，Application Specific Integrated Circuit)、GPU(图形处理单元，Graphics ProcessingUnit)等。
显示部19由液晶显示器等显示装置构成。并且，显示控制部20由显示驱动器IC(集成电路，Integrated Circuit)等构成。
属性信息数据库21由SDRAM、闪存等各种存储器构成，但也可以由云计算(CloudComputing)构成。
第1图像获取部11从摄像装置、外部的半导体存储器、经由网络连接的外部的服务器等获取第1图像。第1图像为成为对象提取源的图像。
图2表示第1图像的一例。该第1图像具有施加在人物面部的前额的标志“JAPA”的涂鸦即OBJ1和施加在人物面部的脸颊部分的四边形和三角形的复合图形涂鸦即对象OBJ2。
第2图像获取部12从摄像装置、外部的半导体存储器、经由网络连接的外部的服务器等获取第2图像。第2图像为成为从第1图像提取的对象的合成目的地的图像。
对象提取部13从由第1图像获取部11获取的第1图像提取对象。
对象属性信息提取部14提取与所提取的对象的图像相关的属性信息即对象属性信息、在第1图像中提取的对象周围的图像属性信息即对象周围属性信息。
对象属性信息包括对象的种类、对象的位置、对象的种类为标志等字符时的该字符信息、对象的尺寸、对象的颜色信息等。
并且，对象周围属性信息包括所提取的对象的被摄体像的种类(例如，人物的面部)、所提取的对象的被摄体像的朝向(例如，朝向正面)、所提取的对象的被摄体像的尺寸、所提取的对象的被摄体像的偏航方向、俯仰方向、横滚方向的倾斜的倾斜角度、所提取的对象在被摄体像中的位置(例如，前额、脸颊等)、所提取的对象周围的被摄体像的颜色(例如，周围的被摄体为人物的前额时，该人物的肤色，周围的被摄体为夜景时，黑色)等。
另外，偏航方向是指已确定前后、左右、上下的被摄体的、以上下的轴为中心而旋转的方向(即，水平面内的旋转方向)，俯仰方向是指以左右的轴为中心而旋转的方向，横滚方向是指以前后的轴为中心而旋转的方向。
如图3中例示，与所提取的对象OBJ1相关的对象属性信息及对象周围属性信息作为对象属性信息表T1而存储于属性信息DB21。
并且，如图4中例示，与所提取的对象OBJ2相关的对象属性信息及对象周围属性信息作为对象属性信息表T2而存储于属性信息DB21。
每次提取对象时都创建对象属性信息表。
第2图像属性信息提取部15提取由第2图像获取部12获取的第2图像的属性信息。第2图像的属性信息包括第2图像的被摄体的种类(例如，面部)、第2图像的被摄体的尺寸、不同颜色的区域的坐标及分配于该区域的颜色等。
图5表示第2图像的一例。在该第2图像中，被摄体的面部图像F中包含黑色的头发部分区域R1、右眼区域R2、左眼区域R3、鼻子区域R4、嘴部区域R5、手部区域R6。
如图6中例示，第2图像属性信息作为第2图像属性信息表T3而存储于属性信息DB21。第2图像属性信息表只要在获取第2图像时创建一次即可。
布局确定部16根据对象属性信息、对象周围属性信息及第2图像属性信息，确定第2图像中的对象的布局(合成位置)。
校正部17根据对象属性信息、对象周围属性信息及第2图像属性信息，对所提取的对象及第2图像中的至少一个进行校正。
合成部18创建将对象(若已校正对象，则是已校正的对象)合成到第2图像(若已校正第2图像，则是已校正的第2图像)的合成位置而成的合成图像。
显示部19根据显示控制部20的控制，显示第1图像、第2图像、所提取的对象、已校正的对象、已校正的第2图像、合成图像等任意图像。
显示控制部20进行根据用户指示或各种程序切换显示部19的显示内容的控制。
图7是表示由图像处理装置100执行的对象合成处理的流程的流程图。用于使图像处理装置100或其他各种计算机(处理器)执行该处理的程序记录于SDRAM、ROM、CD-ROM等图像处理装置100或其他各种计算机(处理器)能读取的记录介质。
在S1中，第1图像获取部11获取第1图像。
在S2中，对象提取部13从第1图像提取对象。
在S3中，对象属性信息提取部14从所提取的对象提取对象属性信息。
在S4中，对象属性信息提取部14提取在第1图像中提取的对象的周围图像的属性信息即对象周围属性信息。
在S5中，第2图像获取部12获取第2图像。
在S6中，第2图像属性信息提取部(15)提取第2图像的属性信息。
在S7中，布局确定部16根据对象属性信息、对象周围属性信息及第2图像属性信息，确定第2图像中的对象的合成位置。
在S8中，校正部(17)根据对象属性信息、对象周围属性信息及第2图像属性信息，对所提取的对象及第2图像中的至少一个进行校正。
在S9中，合成部(18)创建将对象(若已校正对象，则是已校正的对象)合成到第2图像(若已校正第2图像，则是已校正的第2图像)的合成位置而成的合成图像。
在S10中，显示控制部(20)以将合成图像显示于显示部(19)的方式进行控制。
图8～13表示对象和/或第2图像的校正、对象的布局及对象和第2图像的合成图像的例。
如图8中例示，若第1图像中的对象OBJ1的位置为“前额”，则第2图像中的对象OBJ1的合成位置确定为“前额”。
并且，如图8中例示，假设对象”JAPA”的标志的对象OBJ1的属性信息中的颜色为“黑色”，第2图像属性信息中的对象的合成位置所属的区域的颜色为“棕色”。此时，若将黑色标志合成到棕色区域，则会导致难以看清标志。因此，已进行将黑色标志反转为白色的校正之后的标志”JAPA”的对象obj1合成到前额，从而获得合成图像Fsl。
并且，如图9中例示，若对象OBJ2的位置为“左脸颊”，则第2图像中的对象的合成位置确定为“左脸颊”。
并且，如图9中例示，若四边形和三角形的复合图形涂鸦的对象OBJ2(图2)的对象属性信息中的被摄体朝向为“正面”，第2图像属性信息中的被摄体朝向为向右偏航方向偏转45度及向下俯仰方向偏转10度，则通过合成已实施校正之后的对象obj2来获得合成图像Fs2，所述校正中，以使对象OBJ2成为向右偏航方向偏转45度及向下俯仰方向偏转10度的朝向的方式，实施平行移动·旋转·放大或缩小的仿射变换(更普遍的是射影变换)。
并且，例如如图10中例示，假设标志”ABCDEFG”的对象OBJ3的对象属性信息中的颜色为“黑色”，对象周围属性信息的摄影场景为“白天”，第2图像属性信息中的摄影场景为“夜景”。此时，若将该黑色标志合成到夜景，则会导致难以看清标志。因此，合成已进行将黑色标志反转为白色的校正之后的标志”ABCDEFG”的对象obj3。合成位置确定为在第1图像及第2图像中共同的图像右下的位置。通过合成该对象obj3和第2图像，获得合成图像Fs。
另外，摄影场景的信息能够从图像的标签信息(Exif：可交换图像文件格式，Exchangeable image file format)等中包含的摄影的日期和时间信息、图像的明度(亮度)·彩度·色相的颜色信息等获取或推断。
并且，例如如图12中例示，第2图像属性信息中的被摄体种类为“冰”时，进行如下校正来获得校正之后的对象obj4，所述校正中，将对从第1图像提取的标志”ABCDEFG”的对象OBj4进行了镜面反射之后的状态的装饰图像附加到标志”ABCDEFG”的对象OBJ4。获得该校正之后的对象obj4合成到第2图像的下部而成的合成图像Fs3。
并且，例如如图13中例示，在“快速”的对象obj5的对象属性信息中包含的字符信息为“快速”，字符修饰的种类为“运动物体抖动”，第2图像属性信息中包含的对象OBJ6的被摄体种类为“新干线”时，通过进行对第2图像的“新干线”的对象OBJ6赋予“运动物体抖动”的图像修饰的校正来获得对象obj6。“快速”的对象obj5的合成位置确定为第2图像的空白部分。通过“快速”的对象obj5合成到第2图像，获得合成图像Fs4。
并且，在图8～13中，作为共同的校正，包括对象尺寸的调整。即，以在与合成之后的第2图像的被摄体之间的关系中也保持对象属性信息中包含的对象尺寸与对象周围属性信息中包含的第1图像的被摄体尺寸之比的方式，进行对象的放大或缩小。
如此，根据第1图像的属性信息、从第1图像提取的对象的周围属性信息、第2图像的属性信息，对第1图像的对象及第2图像中的至少一个进行校正，并且确定第1图像的对象在第2图像的合成位置。因此，用户无需通过手动操作进行对象的校正、第2图像的校正、合成位置的确定就能够获得合成图像。
因此，用户无需通过目视确认第1图像的对象和第2图像的属性信息并通过手动进行校正，能够实现将从图像提取的对象布局到其他图像的操作的效率化，并减轻进行该操作的用户的负担。
符号说明
11-第1图像获取部，12-第2图像获取部，13-对象提取部，14-对象属性信息提取部，15-第2图像属性信息提取部，16-布局确定部，17-校正部，18-合成部，19-显示部，20-显示控制部，21-属性信息数据库，100-图像处理装置。

Claims (15)

1.一种图像处理装置，其将从第1图像提取的与所述第1图像中的被摄体像相匹配的对象与第2图像中的被摄体像相匹配地合成到所述第2图像，所述图像处理装置具备：
属性信息获取部，获取作为所述对象的属性信息的第1属性信息、与所述第1图像中的被摄体像相关的作为所述对象周围的属性信息的周围属性信息及与所述第2图像中的被摄体像相关的作为所述第2图像的属性信息的第2属性信息；
确定部，根据所述第1属性信息、所述周围属性信息及所述第2属性信息，确定将所述对象合成到所述第2图像时的布局；
校正部，根据由所述确定部确定的布局、所述第1属性信息、所述周围属性信息及所述第2属性信息，对所述第2图像及所述对象中的至少一个进行校正；及
合成部，根据由所述确定部确定的布局及所述校正部的校正的结果，以使所述对象与所述第2图像中的被摄体像相匹配的方式将所述对象合成到所述第2图像。
2.根据权利要求1所述的图像处理装置，其中，
所述周围属性信息包括所述第1图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜、尺寸、所述对象在所述第1图像的被摄体上的位置及对象周围的被摄体的颜色中的至少1个，
所述第2属性信息包括所述第2图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜、尺寸及被摄体的颜色中的至少1个。
3.根据权利要求2所述的图像处理装置，其中，
所述确定部根据所述第1图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜与所述第2图像的被摄体的偏航方向、俯仰方向、横滚方向的倾斜之间的差分，
确定使所述对象旋转和/或变形的布局。
4.根据权利要求3所述的图像处理装置，其中，
使所述对象旋转和/或变形的布局通过射影变换来进行。
5.根据权利要求2至4中任一项所述的图像处理装置，其中，
所述确定部确定所述对象在所述第2图像的被摄体上的位置与所述对象在所述第1图像的被摄体上的位置相匹配的布局。
6.根据权利要求5所述的图像处理装置，其中，
所述第1图像的被摄体上的位置包括所述第1图像的被摄体的面部的前额及脸颊中的至少1个，
所述第2图像的被摄体上的位置包括所述第2图像的被摄体的面部的前额及脸颊中的至少1个。
7.根据权利要求2至4中任一项所述的图像处理装置，其中，
所述校正部根据所述第1图像的被摄体的尺寸与所述第2图像的被摄体的尺寸之间的差分，放大或缩小所述对象的尺寸，由此对所述对象进行尺寸的调整。
8.根据权利要求1至4中任一项所述的图像处理装置，其中，
所述校正部将所述对象的颜色校正为与所述第2图像的颜色相匹配的颜色。
9.根据权利要求1至4中任一项所述的图像处理装置，其中，
所述校正部以与配置于所述第2图像的所述对象的周围属性相匹配的方式对所述对象进行校正。
10.根据权利要求1至4中任一项所述的图像处理装置，其中，
配置于所述第2图像的所述对象的周围属性包括光泽及反射率中的至少1个，
所述校正部通过根据所述对象的周围属性对所述对象附加镜像来对所述对象进行校正。
11.根据权利要求1至4中任一项所述的图像处理装置，其中，
所述校正部以使所述第2图像的属性与所述对象的属性相匹配的方式对所述第2图像进行校正。
12.根据权利要求11所述的图像处理装置，其中，
所述对象的属性包括字符的模糊。
13.根据权利要求1至4中任一项所述的图像处理装置，其中，
所述对象包括字符及图案中的至少1个。
14.一种图像处理方法，其为由计算机将从第1图像提取的与所述第1图像中的被摄体像相匹配的对象与第2图像中的被摄体像相匹配地合成到所述第2图像的图像处理方法，所述图像处理方法执行如下步骤：
获取作为所述对象的属性信息的第1属性信息、与所述第1图像中的被摄体像相关的作为所述对象周围的属性信息的周围属性信息及与所述第2图像中的被摄体像相关的作为所述第2图像的属性信息的第2属性信息的步骤；
根据所述第1属性信息、所述周围属性信息及所述第2属性信息，确定将所述对象合成到所述第2图像时的布局的步骤；
根据所述布局、所述第1属性信息、所述周围属性信息及所述第2属性信息，对所述第2图像及所述对象中的至少一个进行校正的步骤；及
根据所述布局及所述校正的结果，以使所述对象与所述第2图像中的被摄体像相匹配的方式将所述对象合成到所述第2图像的步骤。
15.一种记录介质，其为非临时且计算机能读取的记录介质，其中，
通过计算机读取存储于所述记录介质的指令时，使计算机执行权利要求14所述的图像处理方法。
CN201980057076.9A 2018-09-06 2019-08-01 图像处理装置、方法及记录介质 Active CN112640412B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018166965 2018-09-06
JP2018-166965 2018-09-06
PCT/JP2019/030258 WO2020049914A1 (ja) 2018-09-06 2019-08-01 画像処理装置、方法およびプログラム

Publications (2)

Publication Number Publication Date
CN112640412A CN112640412A (zh) 2021-04-09
CN112640412B true CN112640412B (zh) 2023-03-10

Family

ID=69722461

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980057076.9A Active CN112640412B (zh) 2018-09-06 2019-08-01 图像处理装置、方法及记录介质

Country Status (4)

Country Link
US (1) US11403798B2 (zh)
JP (1) JP7100139B2 (zh)
CN (1) CN112640412B (zh)
WO (1) WO2020049914A1 (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07203299A (ja) * 1994-01-10 1995-08-04 Fujitsu Ltd カラー画像の色調整，及び画像合成方法，並びに装置
US6987535B1 (en) * 1998-11-09 2006-01-17 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
WO2014169653A1 (zh) * 2013-08-28 2014-10-23 中兴通讯股份有限公司 一种图像合成的优化方法及装置
CN107945102A (zh) * 2017-10-23 2018-04-20 深圳市朗形网络科技有限公司 一种图片合成的方法及装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06342457A (ja) 1992-09-14 1994-12-13 Fuji Photo Film Co Ltd 画像処理方法及び装置
JP2005228185A (ja) 2004-02-16 2005-08-25 E4C-Link Corp キャラクター提供システム
JP2008282094A (ja) 2007-05-08 2008-11-20 Canon Inc 文字認識処理装置
US7970237B2 (en) * 2007-08-01 2011-06-28 Adobe Systems Incorporated Spatially-varying convolutions for rendering glossy reflection effects
JP4877319B2 (ja) * 2008-12-24 2012-02-15 カシオ計算機株式会社 画像生成装置、プログラム、画像表示方法、及び、撮像方法
US8380005B1 (en) * 2009-02-02 2013-02-19 Adobe Systems Incorporated System and method for image composition using non-destructive editing model and fast gradient solver
JP5636807B2 (ja) 2010-08-12 2014-12-10 富士ゼロックス株式会社 画像処理装置及びプログラム
GB2501473A (en) * 2012-04-23 2013-10-30 Clothes Network Ltd Image based clothing search and virtual fitting
KR102000536B1 (ko) 2012-12-28 2019-07-16 삼성전자주식회사 합성 이미지를 촬영하는 촬영 장치 및 그 방법
JP5991536B2 (ja) * 2013-02-01 2016-09-14 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
JP2015002423A (ja) 2013-06-14 2015-01-05 ソニー株式会社 画像処理装置、サーバ及び記憶媒体
JP6075315B2 (ja) * 2014-03-28 2017-02-08 株式会社Ｊｖｃケンウッド 合成画像作成システム、合成画像作成方法、及び合成画像作成プログラム
US10192361B2 (en) * 2015-07-06 2019-01-29 Seiko Epson Corporation Head-mounted display device and computer program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07203299A (ja) * 1994-01-10 1995-08-04 Fujitsu Ltd カラー画像の色調整，及び画像合成方法，並びに装置
US6987535B1 (en) * 1998-11-09 2006-01-17 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
WO2014169653A1 (zh) * 2013-08-28 2014-10-23 中兴通讯股份有限公司 一种图像合成的优化方法及装置
CN107945102A (zh) * 2017-10-23 2018-04-20 深圳市朗形网络科技有限公司 一种图片合成的方法及装置

Also Published As

Publication number Publication date
US11403798B2 (en) 2022-08-02
US20210150790A1 (en) 2021-05-20
JPWO2020049914A1 (ja) 2021-09-24
CN112640412A (zh) 2021-04-09
JP7100139B2 (ja) 2022-07-12
WO2020049914A1 (ja) 2020-03-12

Similar Documents

Publication Publication Date Title
KR102304674B1 (ko) 얼굴 표정 합성 방법과 장치, 전자 기기, 및 저장 매체
US11682105B2 (en) Automatic image inpainting
US11450075B2 (en) Virtually trying cloths on realistic body model of user
CN110163832B (zh) 人脸融合方法、装置和终端
CN111652796A (zh) 图像处理方法、电子设备及计算机可读存储介质
JP7105210B2 (ja) 画像処理方法、プログラム、及び画像処理システム
US11496661B2 (en) Image processing apparatus and image processing method
US20190272658A1 (en) Image processing device, image processing method, and program
EP2107529A2 (en) Storage medium storing image conversion programm and image conversion apparatus
JP2020160745A5 (zh)
US10912372B2 (en) Facial stencils
JP2019046239A (ja) 画像処理装置、画像処理方法、プログラム及び合成用画像データ
CN112640412B (zh) 图像处理装置、方法及记录介质
US8971636B2 (en) Image creating device, image creating method and recording medium
JP6794284B2 (ja) カメラ機能を有する携帯可能な情報処理装置、その表示制御方法、及びプログラム
JP4502645B2 (ja) 人物画像抽出装置、及びコンピュータプログラム
JP4323910B2 (ja) 画像合成装置及び方法
US20200311998A1 (en) Image processing method, program, and image processing system
JP4084784B2 (ja) プログラム、情報記憶媒体、写真印刷装置及び写真印刷方法
JP4171722B2 (ja) プログラム、情報記憶媒体、写真印刷装置及び写真印刷方法
JP2024017389A (ja) 画像処理装置、画像処理方法及びプログラム
JP2001307122A (ja) 顔写真画像切り抜き方法
CN114820309A (zh) 图像合成方法、设备及存储介质
JP2006031562A (ja) プログラム、情報記憶媒体、写真印刷装置及び写真印刷方法
JP2009055305A (ja) 画像に情報を付加する画像処理

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant