CN115984100A - 图像生成方法、装置、电子设备和存储介质 - Google Patents

图像生成方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN115984100A
CN115984100A CN202111204005.2A CN202111204005A CN115984100A CN 115984100 A CN115984100 A CN 115984100A CN 202111204005 A CN202111204005 A CN 202111204005A CN 115984100 A CN115984100 A CN 115984100A
Authority
CN
China
Prior art keywords
coordinate
image
value
pixel point
rendered
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111204005.2A
Other languages
English (en)
Inventor
鞠波
叶晓青
谭啸
孙昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202111204005.2A priority Critical patent/CN115984100A/zh
Publication of CN115984100A publication Critical patent/CN115984100A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Generation (AREA)

Abstract

本公开提供了图像生成方法、装置、电子设备和存储介质,涉及人工智能领域,具体涉及计算机视觉和深度学习领域,具体可用于3D视觉场景下。具体实现方案为:获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,待渲染图像是由彩色图像及对应的透明度掩码图像按照拼接方式拼接得到;根据贴图坐标、尺寸信息和拼接方式,从待渲染图像中获取屏幕像素点对应的颜色像素值和透明度值;根据屏幕像素点对应的颜色像素值和透明度值,在屏幕上生成与待渲染图像对应的透明图像。该方法可以从待渲染图像中直接获取屏幕像素点对应的颜色像素值和透明度值,提高了渲染效率和显示效果。

Description

图像生成方法、装置、电子设备和存储介质
技术领域
本公开涉及人工智能领域,具体涉及计算机视觉和深度学习领域,具体可用于3D视觉场景下,具体涉及图像生成方法、装置、电子设备和存储介质。
背景技术
透明视频或透明图片通常是指除了图片本身的RGB通道外,还具备alpha通道,alpha通道值用来表示当前像素的透明度。比如,在生成AR(Augmented Reality,增强现实)伪全息素材时,通常需要生成透明视频或者图片。
相关技术中,通常采用图像绿幕抠图处理的方式,实现透明效果。但是这种方式,在滤除图像中的绿色之后,容易在物体边缘处遗留一些绿色,使得显示效果不佳。
发明内容
本公开提供了一种图像生成方法、装置、电子设备和存储介质。
根据本公开的一方面,提供了一种图像生成方法,包括:
获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,所述待渲染图像是由彩色图像及对应的透明度掩码图像按照所述拼接方式拼接得到;
根据所述贴图坐标、所述尺寸信息和所述拼接方式,从所述待渲染图像中获取所述屏幕像素点对应的颜色像素值和透明度值;
根据所述屏幕像素点对应的颜色像素值和透明度值,在所述屏幕上生成与所述待渲染图像对应的透明图像。
根据本公开的另一方面,提供了一种图像生成装置,包括:
第一获取模块,用于获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,所述待渲染图像是由彩色图像及对应的透明度掩码图像按照所述拼接方式拼接得到;
第二获取模块,用于根据所述贴图坐标、所述尺寸信息和所述拼接方式,从所述待渲染图像中获取所述屏幕像素点对应的颜色像素值和透明度值;
生成模块,用于根据所述屏幕像素点对应的颜色像素值和透明度值,在所述屏幕上生成与所述待渲染图像对应的透明图像。
根据本公开的另一方面,提供了一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述实施例所述的方法。
根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据上述实施例所述的方法。
根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现上述实施例所述方法的步骤。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1为本公开实施例提供的一种图像生成方法的流程示意图;
图2为本公开实施例提供的另一种图像生成方法的流程示意图;
图3为本公开实施例提供的一个待渲染图像的示意图;
图4为本公开实施例提供的另一种图像生成方法的流程示意图;
图5为本公开实施例提供的另一种图像生成方法的流程示意图;
图6为本公开实施例提供的一种图像生成装置的结构示意图;
图7是用来实现本公开实施例的图像生成方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
下面参考附图描述本公开实施例的图像生成方法、装置、电子设备和存储介质。
人工智能是研究使用计算机来模拟人的某些思维过程和智能行为(如学习、推理、思考、规划等)的学科,既有硬件层面的技术领域也有软件层面的技术。人工智能硬件技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理等技术;人工智能软件技术包括计算机视觉技术、语音识别技术、自然语言处理技术以及深度学习、大数据处理技术、知识图谱技术等几大方向。
计算机视觉是一门研究如何使机器“看”的科学,是指用摄影机和电脑代替人眼对目标进行识别、跟踪和测量等机器视觉,并进一步做图形处理,使电脑处理成为更适合人眼观察或传送给仪器检测的图像。
深度学习是机器学习领域中一个新的研究方向。深度学习是学习样本数据的内在规律和表示层次,这些学习过程中获得的信息对诸如文字,图像和声音等数据的解释有很大的帮助。它的最终目标是让机器能够像人一样具有分析学习能力,能够识别文字、图像和声音等数据。
图1为本公开实施例提供的一种图像生成方法的流程示意图。
本公开实施例的图像生成方法,可以由本公开实施例的图像生成装置执行,该装置可配置于电子设备中,以从待渲染图像中直接获取屏幕像素点对应的颜色像素值和透明度值,提高渲染效率和显示效果。
如图1所示,该图像生成方法包括:
步骤101,获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,待渲染图像是由彩色图像及对应的透明度掩码图像按照拼接方式拼接得到。
本公开,在对三维物体或者模型进行贴图时,可以确定每个屏幕像素点与空间中三角面片是否相交,如果相交,可以计算相交点在贴图坐标系下的贴图坐标,从而可以获取屏幕像素点对应的贴图坐标。其中,贴图坐标可以包括第一方向坐标和第二方向坐标值,两个坐标值可以是归一化后的值。
在获取屏幕像素点对应的贴图坐标的同时,还可以获取待渲染图像对应的尺寸信息、拼接方式。其中,待渲染图像可以是由彩色图像及对应的透明度掩码图像按照拼接方式拼接得到,拼接方式可以是上下拼接、左右拼接等;尺寸信息可以是指待渲染图像的宽度和高度信息。
本公开中,透明度掩码图像与彩色图像的尺寸信息相同,透明度掩码图像中包括彩色图像中每个像素点的透明度值。
步骤102,根据贴图坐标、尺寸信息和拼接方式,从待渲染图像中获取屏幕像素点对应的颜色像素值和透明度值。
本公开中,由于彩色图像与透明度掩码图像的拼接方式不同,拼接得到的待渲染图像的尺寸信息也不相同。比如,彩色图像与透明度掩码图像左右拼接时,待渲染图像相比彩色图像高度不变,宽度是彩色图像的两倍,彩色图像与透明度掩码图像上下拼接时,待渲染图像相比彩色图像宽度不变,高度是彩色图像的两倍。
因此,可以根据贴图坐标、待渲染图像的尺寸信息和拼接方式,从待渲染图像中获取贴图坐标对应的颜色像素值和透明度值,也即待贴图的物体上该贴图坐标对应的颜色像素值和透明度值,也即获取贴图坐标对应的屏幕像素点对应的颜色像素值和透明度值。
步骤103,根据屏幕像素点对应的颜色像素值和透明度值,在屏幕上生成与待渲染图像对应的透明图像。
本公开中,可以将屏幕像素点对应的颜色像素值和透明度值相乘,使得屏幕像素点显示相乘得到的颜色像素值对应的颜色,从而在屏幕上可以生成与待渲染图像对应的透明图像。
在实际应用中,透明度值与透明度掩码图像的存储位数相关。比如,若按照8位存储透明度值,即透明度值在0到255之间,那么可以将透明度值归一化到0到1之间,如果透明值为255,那么归一化为1,如果透明度为0到255之间的数,那么调节为0到1之间的浮点数。之后,将归一化后的透明明度值与颜色像素值相乘。这里的相乘是指透明度值与颜色像素值中的每个值均相乘。
本公开实施例的图像生成方法,通过获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,待渲染图像是由彩色图像及对应的透明度掩码图像按照拼接方式拼接得到;根据贴图坐标、尺寸信息和拼接方式,从待渲染图像中获取屏幕像素点对应的颜色像素值和透明度值;根据屏幕像素点对应的颜色像素值和透明度值,在屏幕上生成与待渲染图像对应的透明图像。由此,通过根据屏幕像素点对应的贴图坐标、待渲染图像的尺寸信息和拼接方式,可以从待渲染图像中直接获取屏幕像素点对应的颜色像素值和透明度值,提高了渲染效率和显示效果。
图2为本公开实施例提供的另一种图像生成方法的流程示意图。
如图2所示,该图像生成方法包括:
步骤201,获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,待渲染图像是由彩色图像及对应的透明度掩码图像按照拼接方式拼接得到。
本公开中,步骤201与上述步骤101类似,故在此不再赘述。
步骤202,根据拼接方式,从贴图坐标中的第一方向坐标值和第二方向坐标值中确定出目标坐标值。
本公开中,贴图坐标可以包括第一方向坐标值和第二方向坐标值。在实际应用中,彩色图像中可能没有与贴图坐标对应的像素点,从而获取不到相应的颜色像素值。因此,本公开中,可以根据拼接方式,从第一方向坐标值和第二方向坐标值中确定出能够影响颜色像素值获取的坐标值,作为目标坐标值,之后判断目标坐标值是否满足条件。这里要满足的条件也与拼接方式有关。
图3为本公开实施例提供的一个待渲染图像的示意图。图3中,彩色图像与对应的透明度掩码图像的拼接方式为左右拼接,彩色图像和透明度掩码图像的宽度均为400,拼接后的图像即待渲染图像的高度为1000,宽度为800。
假设,贴图坐标为(U0,V0),其中,U0为水平方向坐标值,V0为垂直方向坐标坐标值,U0和V0的取值均在0到1之间。由于彩色图像与透明度掩码图像是左右拼接,U0值不同会影响颜色像素值的获取,那么可以将U0作为目标坐标值,并判断U0是否小于0.5。如果U0小于0.5,那么U0*宽度800小于400,那么待渲染图像中具有与贴图坐标(U0,V0)与对应的颜色像素值。
可以理解的是,若图3中透明度掩码图像在左边,彩色图像在右边,那么目标坐标值为U0,这时要判断U0是否大于0.5。当U0大于0.5时,待渲染图像中具有与贴图坐标(U0,V0)与对应的颜色像素值。
步骤203,在确定目标坐标值满足条件的情况下,根据贴图坐标、尺寸信息和拼接方式,确定待渲染图像中与屏幕像素点对应的第一像素点和第二像素点。
在确定目标坐标值满足条件的情况下,即待渲染图像中具有与贴图坐标与对应的颜色像素值的情况下,可以从待渲染图像中获取与贴图坐标对应的颜色像素值和透明度值。
本公开中,由于彩色图像与透明度掩码图像的拼接方式不同,拼接得到的待渲染图像的尺寸信息也不相同,而贴图坐标不同,彩色图像中与贴图坐标对应的像素点,及透明度掩码图像中与贴图坐标对应的像素点的位置也不相同。因此,可以根据贴图坐标、尺寸信息和拼接方式,确定待渲染图像中与屏幕像素点对应的第一像素点和第二像素点。其中,第一像素点在彩色图像中的位置与第二像素点在透明度掩码图像中的位置相同。
由于不同的拼接方式,第一像素点在待渲染图像中的坐标的计算方式不变,而第二像素点在待渲染图像中的坐标计算方式不同,因此,本公开中可以根据拼接方式,确定第二像素点的在待渲染图像中坐标的计算方式,之后利用该计算方式,根据贴图坐标和尺寸信息,确定第二像素点在待渲染图像中的坐标。
假设,贴图坐标为(U0,V0),若待渲染图像中彩色图像与透明度掩码图像的拼接方式为左右拼接,待渲染图像的尺寸信息中宽度为W,高度为H。在U0小于0.5的情况下,第一像素点在待渲染图像中的坐标可以为(U0*W,V0*H),第二像素点在待渲染图像中的坐标可以为((U0+0.5)*W,V0*H)。
若待渲染图像中彩色图像在右边与透明度掩码图像在左边,待渲染图像的尺寸信息的宽度为W,高度为H。在U0大于0.5的情况下,第一像素点在待渲染图像中的坐标为(U0*W,V0*H),第二像素点在待渲染图像中的坐标为((U0-0.5)*W,V0*H)。
若待渲染图像中彩色图像与透明度掩码图像的拼接方式为上下拼接、且彩色图像在下,透明度掩码图像在上。那么,在V0小于0.5的情况下,第一像素点在待渲染图像中的坐标为(U0*W,V0*H),第二像素点在待渲染图像中的坐标为(U0*W,(V0+0.5)*H)。
若待渲染图像中彩色图像在上、透明度掩码图像在下,在V0大于0.5的情况下,第一像素点在待渲染图像中的坐标为(U0*W,V0*H),第二像素点在待渲染图像中的坐标为(U0*W,(V0-0.5)*H)。
在目标坐标值未满足条件的情况下,可以确定屏幕像素点对应的透明度值为预设值。比如,贴图坐标为(U0,V0),待渲染图像中彩色图像与透明度掩码图像的拼接方式为左右拼接,即彩色图像在左边,透明度掩码图像在右边,若U0大于0.5时,可以确定屏幕像素点对应的透明度值为1。由此,可以在目标坐标值未满足条件时,返回相应的透明值。
步骤204,获取第一像素点的颜色像素值,及第二像素点的透明度值。
在确定屏幕像素点对应的第一像素点和第二像素点后,可以获取第一像素点的颜色像素值,和第二像素点的透明度值,从而得到屏幕像素点对应的颜色像素值和透明度值。
步骤205,根据屏幕像素点对应的颜色像素值和透明度值,在屏幕上生成与待渲染图像对应的透明图像。
本公开中,步骤205与步骤103类似,故在此不再赘述。
本公开实施例中,在根据贴图坐标、尺寸信息和拼接方式,从待渲染图像中获取屏幕像素点对应的颜色像素值和透明度值时,可以通过根据拼接方式,从贴图坐标中的第一方向坐标值和第二方向坐标值中确定出目标坐标值,在确定目标坐标值满足条件的情况下,根据贴图坐标、尺寸信息和拼接方式,确定待渲染图像中与屏幕像素点对应的第一像素点和第二像素点,并获取第一像素点的颜色像素值,及第二像素点的透明度值。由此,可以从待渲染图像中查找到与屏幕像素点对应的颜色像素值和透明度值,从而可以根据获取颜色像素值和透明度值,在屏幕上生成透明图像,提高了透明图像的显示效果。
图4为本公开实施例提供的另一种图像生成方法的流程示意图。
在上述实施例基础上,如图4所示,上述根据贴图坐标、尺寸信息和拼接方式,确定待渲染图像中与屏幕像素点对应的第一像素点和第二像素点,也可以包括:
步骤401,将第一方向坐标值与尺寸信息中第一方向的长度值相乘,以获取第一数值。
本公开中,可以将贴图坐标中第一方向坐标值与尺寸信息中第一方向的长度值相乘,获取第一数值。也就是,可以将贴图坐标中第一方向坐标值与尺寸信息中相同方向的长度值相乘,得到第一像素点在待渲染图像中第一方向的坐标值。
比如,第一方向为水平方向,可以将贴图坐标中水平方向坐标值与尺寸信息中的宽度值相乘,获取第一数值。
假设,贴图坐标为(U0,V0),尺寸信息中宽度为W,高度为H。若第一方向坐标值为U0,尺寸信息中第一方向的长度值为W,那么第一数值为U0*W。
步骤402,将第二方向坐标值与尺寸信息中第二方向的长度值相乘,以获取第二数值。
本公开中,可以将贴图坐标中第二方向坐标值与尺寸信息中第二方向的长度值相乘,获取第二数值。也就是说,可以将贴图坐标中第二方向坐标值与尺寸信息中相同方向的长度值相乘,得到第一像素点在待渲染图像中第二方向的坐标值。
比如,第一方向为水平方向,第二方向为垂直方向,可以将贴图坐标中垂直方向坐标值与尺寸信息中的高度值相乘,获取第二数值。
假设,贴图坐标为(U0,V0),尺寸信息中宽度为W,高度为H。若贴图坐标中第一方向坐标值为U0,第二方向坐标值为V0,尺寸信息中第一方向的长度值为W,第二方向长度值为H,那么第一数值为U0*W,第二数值为V0*H。
可以理解的是,上述示例中第一方向也可以是垂直方向,第二方向为水平方向。因此,需要说明的是,上述第一方向和第二方向仅为示例,不应当看做是对本公开的限值。
步骤403,根据第一数值和第二数值,确定第一像素点在待渲染图像中的第一坐标。
本公开中,根据第一像素点在待渲染图像中第一方向坐标值第一数据值和第二方向坐标值第二数值,可以确定第一像素点在待渲染图像中的第一坐标。其中,第一坐标包括第一方向坐标值第一数据值和第二方向坐标值第二数值。
步骤404,根据拼接方式和尺寸信息,确定坐标偏移量。
由于第一像素点在彩色图像中的位置与第二像素点在透明度掩码图像中的位置相同,因此,第二像素点在待渲染图像中的第二坐标与第一坐标之间的距离与待渲染图像的尺寸信息相关。并且,第一坐标的计算方式与拼接方式无关,那么可以根据拼接方式和尺寸信息,确定坐标偏移量。
比如,图3中,像素点P1在彩色图像中的位置,与P1′在透明度掩码图像中的位置相同,由于彩色图像与透明度掩码图像之间是左右拼接,那么P1与P1′的垂直方向坐标值相同,水平方向坐标值之间的差值为彩色图像的宽度400,可以确定坐标偏移量为400。
如果图3中彩色图像在右边,透明度掩码图像在左边,那么坐标偏移量为-400。
步骤405,根据第一坐标和坐标偏移量,确定第二像素点在待渲染图像中的第二坐标。
在确定坐标偏移量后,可以根据第一坐标和坐标偏移量,确定第二像素点在待渲染图像中的第二坐标。
由于不同的拼接方式,第一坐标与第二坐标在第一方向或第二方向的值不同,比如,图3中P1与P1′在水平方向坐标值不同,若上下拼接,那么垂直方向坐标值不同。因此,本公开中,可以根据从贴图坐标的第一方向坐标和第二方向坐标值中确定出的目标坐标值,确定根据第一坐标和坐标偏移量,确定第二坐标的方式。
在目标坐标值为第一方向坐标值的情况下,将第一坐标中的第一方向坐标第一数值与坐标偏移量相加,第二数值不变,以获取第二坐标。
在目标坐标值为第二方向坐标值的情况下,将第一坐标中的第二方向坐标第二数值与坐标偏移量相加,第一数值不变,以获取第二坐标。
比如,第一方向为水平方向,即彩色图像与透明度掩码图像左右拼接的情况下,可以将第一坐标中水平方向坐标值与坐标偏移量相加,垂直方向坐标值不变,以获取第二坐标。
比如,图3中,可以将像素点P1的水平方向坐标值加上400,得到像素点P1′的水平方向坐标值,而垂直方向坐标值与像素点P1垂直方向坐标值相同。
本公开中,可以通过目标坐标值,确定基于第一坐标与坐标偏移量,获取第二坐标的具体方式,从而可以获取不同拼接方式下的第二坐标,适用性强。
步骤406,根据第一坐标及第二坐标,确定第一像素点及第二像素点。
本公开中,可以第一坐标可以确定第一像素点,根据第二坐标可以确定第二像素点。
在确定第一像素点和第二像素点后,可以获取对应的颜色像素值和透明度值。在获取屏幕像素点对应的颜色像素值和透明度值后,可以将颜色像素值与透明度值相乘,使得屏幕像素点显示相乘后的得到颜色像素值对应的颜色。
比如,某屏幕像素点对应的第一像素点为图3中的P1,第二像素点为P1′,可以获取像素点P1的颜色像素值为(222,215,252),获取像素点P1′的透明度值为(255,255,255),该屏幕像素点对应的颜色像素值为(222,215,252),透明度值为(255,255,255),并透明值归一化为1,那么颜色像素值与归一化后透明度值相乘后的结果为(222,215,252)。
另一屏幕像素点对应图3中的像素点P2与P2′,那么可以获取像素点P2的颜色像素值为(214,173,171),获取像素点P2′的透明度值为(0,0,0),即该屏幕像素点对应的颜色像素值为(214,173,171),透明度值为(0,0,0)。那么颜色像素值与透明度值相乘后的结果为(0,0,0)。
图3中,透明图掩码图像是以RGB格式存储的,因此,透明图掩码图像中像素点的透明度值包括三个通道中每个通道的透明度值。为了节省存储空间,在存储透明图掩码图像时,可以存储一个值。
本公开实施例中,在根据贴图坐标、尺寸信息和拼接方式,确定待渲染图像中与屏幕像素点对应的第一像素点和第二像素点时,可以通过将贴图坐标与尺寸信息中相同方向的值相乘,得到第一坐标,并根据拼接方式和尺寸信息,确定坐标偏移量,根据第一坐标与坐标偏移量得到第二坐标,从而确定第一像素点和第二像素点。由此,在确定第一坐标后,通过根据坐标偏移量和第一坐标,获取第二坐标,方便简捷。
图5为本公开实施例提供的另一种图像生成方法的流程示意图。
如图5所示,在上述获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,包括:
步骤501,获取彩色图像。
本公开中,彩色图像可以是用户上传的,也可以是从本地获取的。
步骤502,对彩色图像进行透明度掩码处理,以获取对应的透明度掩码图像。
在获取彩色图像后,可以将彩色图像输入至预先训练好的网络中,通过网络对彩色图像进行透明度掩码处理,以获取对应的透明度掩码图像。在实际应用中,可以根据透明效果需求,将彩色图像输入到不同的网络中,以获取不同的透明度掩码图像。其中,所用的网络可以是通过深度学习训练得到的。
比如,可以将包含人像的图像输入至人体分割网络中,通过网络识别出人像以及背景,并对人像和背景取进行不同的透明度掩码处理,从而获取彩色图像对应的透明度掩码图像。
又如,彩色图像中的主体为某类物体,可以通过相应的网络识别出彩色图像中的该类物体,并将对该类物体和背景进行不同的透明度掩码处理,得到透明度掩码图像。
步骤503,按照拼接方式,将彩色图像和透明度掩码图像进行拼接,以生成待渲染图像。
在获取彩色图像对应的透明度掩码图像后,可以按照预设的拼接方式,将彩色图像和透明度图像进行拼接,以生成待渲染图像。可见,待渲染图像中包括彩色图像中每个像素点的颜色像素值和透明度值。
本公开中的拼接方式,可以是左右拼接、上下拼接等,可以根据实际需要确定。比如,为了提高GPU(Graphics Processing Unit,图形处理器)处理的处理速度,可以采用左右拼接,使得拼接后的图像的宽度和高度的比值接近1:1。
本公开实施例中,在获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式之前,可以通过对获取的彩色图像进行透明度掩码处理,以获取对应的透明度掩码图像,并按照拼接方式,将彩色图像和透明度掩码图像进行拼接,以生成待渲染图像。可见,这种获取待渲染图像的方式成本低、复杂度低。
为了实现上述实施例,本公开实施例还提出一种图像生成装置。图6为本公开实施例提供的一种图像生成装置的结构示意图。
如图6所示,该图像生成装置600包括:
第一获取模块610,用于获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,待渲染图像是由彩色图像及对应的透明度掩码图像按照拼接方式拼接得到;
第二获取模块620,用于根据贴图坐标、尺寸信息和拼接方式,从待渲染图像中获取屏幕像素点对应的颜色像素值和透明度值;
第一生成模块630,用于根据屏幕像素点对应的颜色像素值和透明度值,在屏幕上生成与待渲染图像对应的透明图像。
在本公开实施例一种可能的实现方式中,第二获取模块620,包括:
第一确定单元,用于根据拼接方式,从贴图坐标中的第一方向坐标值和第二方向坐标值中确定出目标坐标值;
第二确定单元,用于在确定目标坐标值满足条件的情况下,根据贴图坐标、尺寸信息和拼接方式,确定待渲染图像中与屏幕像素点对应的第一像素点和第二像素点,其中,第一像素点在彩色图像中的位置与第二像素点在透明度掩码图像中的位置相同;
获取单元,用于获取第一像素点的颜色像素值,及第二像素点的透明度值。
在本公开实施例一种可能的实现方式中,第二确定单元,用于:
将第一方向坐标值与尺寸信息中第一方向的长度值相乘,以获取第一数值;
将第二方向坐标值与尺寸信息中第二方向的长度值相乘,以获取第二数值;
根据第一数值和第二数值,确定第一像素点在待渲染图像中的第一坐标;
根据拼接方式和尺寸信息,确定坐标偏移量;
根据第一坐标和坐标偏移量,确定第二像素点在待渲染图像中的第二坐标;
根据第一坐标及第二坐标,确定第一像素点及第二像素点。
在本公开实施例一种可能的实现方式中,第二确定单元,用于:
在目标坐标值为第一方向坐标值的情况下,将第一坐标中的第一数值与坐标偏移量相加,以获取第二坐标;
在目标坐标值为第二方向坐标值的情况下,将第一坐标中的第二数值与坐标偏移量相加,以获取第二坐标。
在本公开实施例一种可能的实现方式中,第二确定单元,还用于
在目标坐标值未满足条件的情况下,确定屏幕像素点对应的透明度值为预设值。
在本公开实施例一种可能的实现方式中,该装置还可包括:
第三获取模块,用于获取彩色图像;
第四获取模块,用于对彩色图像进行透明度掩码处理,以获取对应的透明度掩码图像;
第二生成模块,用于按照拼接方式,将彩色图像和透明度掩码图像进行拼接,以生成待渲染图像。
需要说明的是,前述图像生成装置方法实施例的解释说明,也适用于该实施例的图像生成装置,故在此不再赘述。
本公开实施例的图像生成装置,通过获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,待渲染图像是由彩色图像及对应的透明度掩码图像按照拼接方式拼接得到;根据贴图坐标、尺寸信息和拼接方式,从待渲染图像中获取屏幕像素点对应的颜色像素值和透明度值;根据屏幕像素点对应的颜色像素值和透明度值,在屏幕上生成与待渲染图像对应的透明图像。由此,通过根据屏幕像素点对应的贴图坐标、待渲染图像的尺寸信息和拼接方式,可以从待渲染图像中直接获取屏幕像素点对应的颜色像素值和透明度值,提高了渲染效率和透明效果。
根据本公开的实施例,本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
图7示出了可以用来实施本公开的实施例的示例电子设备700的示意性框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图7所示,设备700包括计算单元701,其可以根据存储在ROM(Read-OnlyMemory,只读存储器)702中的计算机程序或者从存储单元708加载到RAM(Random AccessMemory,随机访问/存取存储器)703中的计算机程序,来执行各种适当的动作和处理。在RAM703中,还可存储设备700操作所需的各种程序和数据。计算单元701、ROM 702以及RAM 703通过总线704彼此相连。I/O(Input/Output,输入/输出)接口705也连接至总线704。
设备700中的多个部件连接至I/O接口705,包括:输入单元706,例如键盘、鼠标等;输出单元707,例如各种类型的显示器、扬声器等;存储单元708,例如磁盘、光盘等;以及通信单元709,例如网卡、调制解调器、无线通信收发机等。通信单元709允许设备700通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元701可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元701的一些示例包括但不限于CPU(Central Processing Unit,中央处理单元)、GPU(Graphic Processing Units,图形处理单元)、各种专用的AI(Artificial Intelligence,人工智能)计算芯片、各种运行机器学习模型算法的计算单元、DSP(Digital SignalProcessor,数字信号处理器)、以及任何适当的处理器、控制器、微控制器等。计算单元701执行上文所描述的各个方法和处理,例如图像生成方法。例如,在一些实施例中,图像生成方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元708。在一些实施例中,计算机程序的部分或者全部可以经由ROM 702和/或通信单元709而被载入和/或安装到设备700上。当计算机程序加载到RAM 703并由计算单元701执行时,可以执行上文描述的图像生成方法的一个或多个步骤。备选地,在其他实施例中,计算单元701可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行图像生成方法。
本文中以上描述的***和技术的各种实施方式可以在数字电子电路***、集成电路***、FPGA(Field Programmable Gate Array,现场可编程门阵列)、ASIC(Application-Specific Integrated Circuit,专用集成电路)、ASSP(Application Specific StandardProduct,专用标准产品)、SOC(System On Chip,芯片上***的***)、CPLD(ComplexProgrammable Logic Device,复杂可编程逻辑设备)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程***上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储***、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储***、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行***、装置或设备使用或与指令执行***、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体***、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、RAM、ROM、EPROM(Electrically Programmable Read-Only-Memory,可擦除可编程只读存储器)或快闪存储器、光纤、CD-ROM(Compact Disc Read-Only Memory,便捷式紧凑盘只读存储器)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的***和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(Cathode-Ray Tube,阴极射线管)或者LCD(Liquid Crystal Display,液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的***和技术实施在包括后台部件的计算***(例如,作为数据服务器)、或者包括中间件部件的计算***(例如,应用服务器)、或者包括前端部件的计算***(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的***和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算***中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将***的部件相互连接。通信网络的示例包括:LAN(LocalArea Network,局域网)、WAN(Wide Area Network,广域网)、互联网和区块链网络。
计算机***可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务(VirtualPrivate Server,虚拟专用服务器)中,存在的管理难度大,业务扩展性弱的缺陷。服务器也可以为分布式***的服务器,或者是结合了区块链的服务器。
根据本公开的实施例,本公开还提供了一种计算机程序产品,当计算机程序产品中的指令处理器执行时,执行本公开上述实施例提出的图像生成方法。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本公开保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本公开保护范围之内。

Claims (15)

1.一种图像生成方法,包括:
获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,所述待渲染图像是由彩色图像及对应的透明度掩码图像按照所述拼接方式拼接得到;
根据所述贴图坐标、所述尺寸信息和所述拼接方式,从所述待渲染图像中获取所述屏幕像素点对应的颜色像素值和透明度值;
根据所述屏幕像素点对应的颜色像素值和透明度值,在所述屏幕上生成与所述待渲染图像对应的透明图像。
2.如权利要求1所述的方法,其中,所述根据所述贴图坐标、所述尺寸信息和所述拼接方式,从所述待渲染图像中获取所述屏幕像素点对应的颜色像素值和透明度值,包括:
根据所述拼接方式,从所述贴图坐标中的第一方向坐标值和第二方向坐标值中确定出目标坐标值;
在确定所述目标坐标值满足条件的情况下,根据所述贴图坐标、所述尺寸信息和所述拼接方式,确定所述待渲染图像中与所述屏幕像素点对应的第一像素点和第二像素点,其中,所述第一像素点在所述彩色图像中的位置与所述第二像素点在所述透明度掩码图像中的位置相同;
获取所述第一像素点的颜色像素值,及所述第二像素点的透明度值。
3.如权利要求2所述的方法,其中,所述根据所述贴图坐标、所述尺寸信息和所述拼接方式,确定所述待渲染图像中与所述屏幕像素点对应的第一像素点和第二像素点,包括:
将所述第一方向坐标值与所述尺寸信息中第一方向的长度值相乘,以获取第一数值;
将所述第二方向坐标值与所述尺寸信息中第二方向的长度值相乘,以获取第二数值;
根据所述第一数值和所述第二数值,确定所述第一像素点在所述待渲染图像中的第一坐标;
根据所述拼接方式和所述尺寸信息,确定坐标偏移量;
根据所述第一坐标和所述坐标偏移量,确定所述第二像素点在所述待渲染图像中的第二坐标;
根据所述第一坐标及所述第二坐标,确定所述第一像素点及所述第二像素点。
4.如权利要求3所述的方法,其中,所述根据所述第一坐标和所述坐标偏移量,确定所述第二像素点在所述待渲染图像中的第二坐标,包括:
在所述目标坐标值为所述第一方向坐标值的情况下,将所述第一坐标中的所述第一数值与所述坐标偏移量相加,以获取所述第二坐标;
在所述目标坐标值为所述第二方向坐标值的情况下,将所述第一坐标中的所述第二数值与所述坐标偏移量相加,以获取所述第二坐标。
5.如权利要求2所述的方法,还包括:
在所述目标坐标值未满足条件的情况下,确定所述屏幕像素点对应的透明度值为预设值。
6.如权利要求1-5任一所述的方法,其中,在所述获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式之前,包括:
获取彩色图像;
对所述彩色图像进行透明度掩码处理,以获取对应的透明度掩码图像;
按照所述拼接方式,将所述彩色图像和所述透明度掩码图像进行拼接,以生成所述待渲染图像。
7.一种图像生成装置,包括:
第一获取模块,用于获取屏幕像素点对应的贴图坐标、及待渲染图像对应的尺寸信息和拼接方式,其中,所述待渲染图像是由彩色图像及对应的透明度掩码图像按照所述拼接方式拼接得到;
第二获取模块,用于根据所述贴图坐标、所述尺寸信息和所述拼接方式,从所述待渲染图像中获取所述屏幕像素点对应的颜色像素值和透明度值;
第一生成模块,用于根据所述屏幕像素点对应的颜色像素值和透明度值,在所述屏幕上生成与所述待渲染图像对应的透明图像。
8.如权利要求7所述的装置,其中,所述第二获取模块,包括:
第一确定单元,用于根据所述拼接方式,从所述贴图坐标中的第一方向坐标值和第二方向坐标值中确定出目标坐标值;
第二确定单元,用于在确定所述目标坐标值满足条件的情况下,根据所述贴图坐标、所述尺寸信息和所述拼接方式,确定所述待渲染图像中与所述屏幕像素点对应的第一像素点和第二像素点,其中,所述第一像素点在所述彩色图像中的位置与所述第二像素点在所述透明度掩码图像中的位置相同;
获取单元,用于获取所述第一像素点的颜色像素值,及所述第二像素点的透明度值。
9.如权利要求8所述的装置,其中,所述第二确定单元,用于:
将所述第一方向坐标值与所述尺寸信息中第一方向的长度值相乘,以获取第一数值;
将所述第二方向坐标值与所述尺寸信息中第二方向的长度值相乘,以获取第二数值;
根据所述第一数值和所述第二数值,确定所述第一像素点在所述待渲染图像中的第一坐标;
根据所述拼接方式和所述尺寸信息,确定坐标偏移量;
根据所述第一坐标和所述坐标偏移量,确定所述第二像素点在所述待渲染图像中的第二坐标;
根据所述第一坐标及所述第二坐标,确定所述第一像素点及所述第二像素点。
10.如权利要求9所述的装置,其中,所述第二确定单元,用于:
在所述目标坐标值为所述第一方向坐标值的情况下,将所述第一坐标中的所述第一数值与所述坐标偏移量相加,以获取所述第二坐标;
在所述目标坐标值为所述第二方向坐标值的情况下,将所述第一坐标中的所述第二数值与所述坐标偏移量相加,以获取所述第二坐标。
11.如权利要求8所述的装置,其中,所述第二确定单元,还用于
在所述目标坐标值未满足条件的情况下,确定所述屏幕像素点对应的透明度值为预设值。
12.如权利要求7-11任一所述的装置,还包括:
第三获取模块,用于获取彩色图像;
第四获取模块,用于对所述彩色图像进行透明度掩码处理,以获取对应的透明度掩码图像;
第二生成模块,用于按照所述拼接方式,将所述彩色图像和所述透明度掩码图像进行拼接,以生成所述待渲染图像。
13.一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-6中任一项所述的方法。
14.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1-6中任一项所述的方法。
15.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现权利要求1-6中任一项所述方法的步骤。
CN202111204005.2A 2021-10-15 2021-10-15 图像生成方法、装置、电子设备和存储介质 Pending CN115984100A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111204005.2A CN115984100A (zh) 2021-10-15 2021-10-15 图像生成方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111204005.2A CN115984100A (zh) 2021-10-15 2021-10-15 图像生成方法、装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN115984100A true CN115984100A (zh) 2023-04-18

Family

ID=85956774

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111204005.2A Pending CN115984100A (zh) 2021-10-15 2021-10-15 图像生成方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN115984100A (zh)

Similar Documents

Publication Publication Date Title
CN112560684B (zh) 车道线检测方法、装置、电子设备、存储介质以及车辆
EP3876197A2 (en) Portrait extracting method and apparatus, electronic device and storage medium
CN112541876B (zh) 卫星图像处理方法、网络训练方法、相关装置及电子设备
CN112529097B (zh) 样本图像生成方法、装置以及电子设备
CN112270745B (zh) 一种图像生成方法、装置、设备以及存储介质
CN111768356A (zh) 一种人脸图像融合方法、装置、电子设备及存储介质
CN113177472A (zh) 动态手势识别方法、装置、设备以及存储介质
CN113379877B (zh) 人脸视频生成方法、装置、电子设备及存储介质
CN113379885B (zh) 虚拟头发的处理方法及装置、可读存储介质及电子设备
CN113033346B (zh) 文本检测方法、装置和电子设备
CN115330940B (zh) 一种三维重建方法、装置、设备和介质
CN114511661A (zh) 图像渲染方法、装置、电子设备及存储介质
CN112528858A (zh) 人体姿态估计模型的训练方法、装置、设备、介质及产品
CN113870439A (zh) 用于处理图像的方法、装置、设备以及存储介质
CN113657396B (zh) 训练方法、译文展示方法、装置、电子设备以及存储介质
CN113409340A (zh) 语义分割模型训练方法、语义分割方法、装置及电子设备
CN113781653B (zh) 对象模型生成方法、装置、电子设备及存储介质
CN115984100A (zh) 图像生成方法、装置、电子设备和存储介质
CN113947146A (zh) 样本数据生成方法、模型训练方法、图像检测方法及装置
CN114119990A (zh) 用于图像特征点匹配的方法、装置及计算机程序产品
CN114140320A (zh) 图像迁移方法和图像迁移模型的训练方法、装置
CN113205131A (zh) 图像数据的处理方法、装置、路侧设备和云控平台
CN113312979B (zh) 图像处理方法、装置、电子设备、路侧设备及云控平台
CN112785524B (zh) 一种人物图像的修复方法、装置及电子设备
EP4120202A1 (en) Image processing method and apparatus, and electronic device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination