CN113852751B - 图像处理方法、装置、终端和存储介质 - Google Patents

图像处理方法、装置、终端和存储介质 Download PDF

Info

Publication number
CN113852751B
CN113852751B CN202010597481.4A CN202010597481A CN113852751B CN 113852751 B CN113852751 B CN 113852751B CN 202010597481 A CN202010597481 A CN 202010597481A CN 113852751 B CN113852751 B CN 113852751B
Authority
CN
China
Prior art keywords
image data
preview image
color coding
coding format
conversion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010597481.4A
Other languages
English (en)
Other versions
CN113852751A (zh
Inventor
蔡振锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010597481.4A priority Critical patent/CN113852751B/zh
Publication of CN113852751A publication Critical patent/CN113852751A/zh
Application granted granted Critical
Publication of CN113852751B publication Critical patent/CN113852751B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Color Image Communication Systems (AREA)
  • Image Processing (AREA)

Abstract

本申请实施例公开了一种图像处理方法、装置、终端和存储介质,本申请可以在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,该第一颜色编码格式为适用于该内核层的颜色编码格式,然后,在终端***的应用层确定该初始预览图像数据处理的优先指标,接着,基于该优先指标,在该内核层的多个候选图像转换方式中确定目标图像转换方式,再基于该目标图像转换方式,在该内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,该第二颜色编码格式为适用于该应用层的颜色编码格式,再然后,在该应用层显示该预览图像数据;该方案可以有效地提高终端图像处理的效率。

Description

图像处理方法、装置、终端和存储介质
技术领域
本申请涉及通信技术领域,具体涉及一种图像处理方法、装置、终端和存储介质。
背景技术
Android(安卓)应用在使用相机拍照时,如果需要获取到底层提供的照片时,则可以通过执行Camera API(Camera Application Programming Interface,相机应用程序接口)中capture(拍摄)的操作,然后处理回调的数据即可。
但是在使用Camera API时,由于应用层的需求不同,会存在对最后的图像进行后处理和格式转换的操作,而现有的在应用层上针对图像后处理的方案,主要是使用Bitmap的处理算法,对承载图像数据的Jpeg(一种图像文件格式)格式文件进行旋转、裁剪和镜像等操作,该方案的图像生成速度较慢,耗时较长。
发明内容
本申请实施例提供一种图像处理方法、装置、终端和存储介质,可以有效地提高终端图像处理的效率。
本申请实施例提供一种图像处理方法,包括:
在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式;
在终端***的应用层确定所述初始预览图像数据处理的优先指标;
基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式;
基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式;
在所述应用层显示所述预览图像数据。
相应的,本申请实施例还提供一种图像处理装置,包括:
获取单元,用于在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式;
第一确定单元,用于在终端***的应用层确定所述初始预览图像数据处理的优先指标;
第二确定单元,用于基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式;
转换单元,用于基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式;
显示单元,用于在所述应用层显示所述预览图像数据。
可选的,在一些实施例中,在所述图像处理装置中,所述优先指标包括图像处理速度和图像处理精度,所述第二确定单元包括第一确定子单元和第二确定子单元,如下:
所述第一确定子单元,用于当所述优先指标为图像处理速度,从多个候选图像转换方式中确定目标图像转换方式为第一图像转换方式;
所述第二确定子单元,用于当所述优先指标为图像处理精度,从多个候选图像转换方式中确定目标图像转换方式为第二图像转换方式。
可选的,在一些实施例中,在所述图像处理装置中,所述转换单元包括第一转换子单元和第二转换子单元,如下:
所述第一转换子单元,用于当所述目标图像转换方式为第一图像转换方式时,在所述内核层中利用终端***的***转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,所述***转换算法为终端***自带的格式转换算法;
所述第二转换子单元,用于当所述目标图像转换方式为第二图像转换方式时,在所述内核层中利用自定义转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,所述自定义转换算法为预先对转换精度进行自定义并存储于终端***的算法。
可选的,在一些实施例中,在所述图像处理装置中,所述***转换算法包括调用转换脚本和调用目标接口函数,所述第一转换子单元,具体用于当所述初始预览图像数据不需要裁剪时,在所述内核层中调用转换脚本对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据;当所述初始预览图像数据需要裁剪时,在所述内核层中调用目标接口函数对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,所述目标接口函数为对终端***的接口函数进行修改后得到的接口函数。
可选的,在一些实施例中,在所述图像处理装置中,所述第一转换子单元,具体用于当所述目标图像转换方式为第一图像转换方式时,在所述内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;将所述亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据;根据预设偏移量对所述第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
可选的,在一些实施例中,在所述图像处理装置中,所述第二转换子单元,具体用于当所述目标图像转换方式为第二图像转换方式时,在所述内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;利用自定义转换方式对所述亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据,所述自定义转换方式为预先对格式转换的精度进行自定义并存储在终端***中的转换方式;根据预设偏移量对所述第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
可选的,在一些实施例中,在所述图像处理装置中,所述第一确定单元,具体用于在终端***的应用层确定所述初始预览图像数据的显示需求;根据所述显示需求确定所述初始预览图像数据处理的优先指标。
可选的,在一些实施例中,在所述图像处理装置中,还包括空间变换单元,如下:
所述空间变换单元,用于当所述预览图像数据需要进行空间变换时,获取所述预览图像数据中每个像素点的坐标;将所述预览图像数据中每个像素点的坐标进行坐标变换,得到变换后预览图像数据;
则所述显示单元,用于在所述应用层显示所述变换后预览图像数据。
可选的,在一些实施例中,在所述图像处理装置中,还包括设置单元,如下:
所述设置单元,用于对终端***的拍摄接口进行配置;以及设置所述终端***的拍摄成像格式为第一颜色编码格式;
则所述获取单元,具体用于当检测到用户针对终端的拍摄操作时,在所述终端***的内核层中获取到第一颜色编码格式的初始预览图像数据。
此外,本申请实施例还提供一种终端,所述终端包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如本申请实施例提供的任一种图像处理方法中的步骤。
此外,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行本申请实施例提供的任一种图像处理方法中的步骤。
本申请实施例可以在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式,然后,在终端***的应用层确定所述初始预览图像数据处理的优先指标,接着,基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式,再基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式,再然后,在所述应用层显示所述预览图像数据;该方案可以有效地提高终端图像处理的效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a是本申请实施例提供的图像处理方法的场景示意图;
图1b是本申请实施例提供的图像处理方法的第一流程示意图;
图2a是本申请实施例提供的图像处理方法的第二流程示意图;
图2b是本申请实施例提供的图像处理方法的第三流程示意图;
图3是本申请实施例提供的图像处理装置的结构示意图;
图4是本申请实施例提供的终端的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在以下的说明中,本申请的具体实施例将参考由一部或多部计算机所执行的步骤及符号来说明,除非另有述明。因此,这些步骤及操作将有数次提到由计算机执行,本文所指的计算机执行包括了由代表了以一结构化型式中的数据的电子信号的计算机处理单元的操作。此操作转换该数据或将其维持在该计算机的内存***中的位置处,其可重新配置或另外以本领域测试人员所熟知的方式来改变该计算机的运作。该数据所维持的数据结构为该内存的实***置,其具有由该数据格式所定义的特定特性。但是,本申请原理以上述文字来说明,其并不代表为一种限制,本领域测试人员将可了解到以下所述的多种步骤及操作亦可实施在硬件当中。
本申请的原理使用许多其它泛用性或特定目的运算、通信环境或组态来进行操作。所熟知的适合用于本申请的运算***、环境与组态的范例可包括(但不限于)手持电话、个人计算机、服务器、多处理器***、微电脑为主的***、主架构型计算机、及分布式运算环境,其中包括了任何的上述***或装置。
本申请中的术语“第一”、“第二”和“第三”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。
本申请实施例提供一种图像处理方法、装置、终端和存储介质。其中,该图像处理装置具体可以集成在如手机、平板电脑、掌上电脑(PDA,Personal Digital Assistant)、笔记本电脑以及个人计算机(Personal Computer,PC)等可以实现图像处理的终端中。
例如,参见图1a,用户在使用终端进行拍摄时,发送拍摄请求给终端,终端在接收到拍摄请求后,在自身***(即终端***)的内核层中获取第一颜色编码格式的初始预览图像数据,该第一颜色编码格式为适用于该内核层的颜色编码格式,然后,在自身***(即终端***)的应用层确定该初始预览图像数据处理的优先指标,接着,基于该优先指标,在该内核层的多个候选图像转换方式中确定目标图像转换方式,再基于该目标图像转换方式,在该内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,该第二颜色编码格式为适用于该应用层的颜色编码格式,再然后,在该应用层显示该预览图像数据。
由于该方案可以根据初始预览图像数据处理的优先指标的不同,在多个候选图像转换方式选择目标图像转换方式,并在终端***的内核层中对初始预览图像数据的格式进行转换,有效地提高了终端图像处理的效率。
以下分别进行详细说明。需说明的是,以下实施例的顺序不作为对实施例优选顺序的限定。
在本实施例中,将从图像处理装置的角度进行描述,该图像处理装置可以集成在终端中,该终端可以是手机、平板电脑、掌上电脑、笔记本电脑以及个人计算机等可以实现图像处理的设备。
本申请实施例提供一种图像处理方法,包括:在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,该第一颜色编码格式为适用于该内核层的颜色编码格式,然后,在终端***的应用层确定该初始预览图像数据处理的优先指标,接着,基于该优先指标,在该内核层的多个候选图像转换方式中确定目标图像转换方式,再基于该目标图像转换方式,在该内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,该第二颜色编码格式为适用于该应用层的颜色编码格式,再然后,在该应用层显示该预览图像数据。
请参阅图1b,图1b为本申请实施例提供的图像处理方法的第一流程示意图。该方法的具体流程可以如下:
101、在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,该第一颜色编码格式为适用于该内核层的颜色编码格式。
在利用终端的相机执行拍摄操作时,可以在拍摄前先对终端***进行环境搭建,比如,具体可以对终端***的拍摄接口进行配置,以及设置该终端***的拍摄成像格式为第一颜色编码格式。
比如,第一颜色编码格式可以为YUV格式。其中,YUV是一种颜色编码方法。常使用在各个视频处理组件中。YUV在对照片或视频编码时,考虑到人类的感知能力,允许降低色度的带宽。YUV是编译true-color颜色空间(color space)的种类,Y'UV,YUV,YCbCr,YPbPr等专有名词都可以称为YUV,彼此有重叠。“Y”表示明亮度(Luminance或Luma),也就是灰阶值,“U”和“V”表示的则是色度(Chrominance或Chroma),作用是描述影像色彩及饱和度,用于指定像素的颜色。
例如,具体可以在用户执行拍摄功能时,发送拍摄请求给终端,终端则对该拍摄请求进行接收,并根据该拍摄请求在终端***的内核层中获取当前的第一颜色编码格式的初始预览图像数据。即,当检测到用户针对终端的拍摄操作时,在该终端***的内核层中获取到第一颜色编码格式的初始预览图像数据。
由于对图像进行处理的算法是基于YUV格式的,而所有的显示面板都是接收RGB格式的数据,因此,当采集到图像数据后,一般输出的就是YUV格式的数据流,然后再去进行压缩编码等其他步骤来进行数据传输或保存。而最终显示在屏幕面前,通常又是以RGB格式来展现的。所以,需要将采集到的YUV格式数据转换为RGB格式数据以在终端屏幕上显示,即将第一颜色编码格式的初始预览图像数据转换为第二颜色编码格式的预览图像数据。
102、在终端***的应用层确定该初始预览图像数据处理的优先指标。
其中,优先指标指的是终端***在对初始预览图像数据处理时优先选择的处理标准,比如,该优先指标可以包括图像处理速度和图像处理精度。
例如,具体可以在终端***的应用层确定该初始预览图像数据的显示需求,根据该显示需求确定该初始预览图像数据处理的优先指标。
其中,显示需求指的是预览图像数据在终端屏幕上显示的需求,比如,预览图像数据是只需要转换格式,还是需要保留精度,等等。比如,该初始预览图像数据只需要转化格式时,则确定该初始预览图像数据处理的优先指标为图像处理速度,又比如,该初始预览图像数据需要保留精度时,则确定该初始预览图像数据处理的优先指标为图像处理精度,等等。
103、基于该优先指标,在该内核层的多个候选图像转换方式中确定目标图像转换方式。
比如,具体可以当该优先指标为图像处理速度,从多个候选图像转换方式中确定目标图像转换方式为第一图像转换方式;当该优先指标为图像处理精度,从多个候选图像转换方式中确定目标图像转换方式为第二图像转换方式。
其中,候选图像转换方式指的是预先设定好的图像转换方式,候选图像转换方式的设定方式可以有很多种,比如,可以根据实际应用的需求灵活设置,也可以预先设置好存储在终端中。此外,候选图像转换方式可以内置于终端中,或者,也可以保存在存储器中并发送给终端,等等。
比如,第一图像转换方式具体可以为终端***的***转换算法,第二图像转换方式具体可以为预先自定义并存储在终端***中的转换算法,简称自定义转换算法。
104、基于该目标图像转换方式,在该内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,该第二颜色编码格式为适用于该应用层的颜色编码格式。
例如,具体可以当该目标图像转换方式为第一图像转换方式时,在该内核层中利用终端***的***转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,该***转换算法为终端***自带的格式转换算法;当该目标图像转换方式为第二图像转换方式时,在该内核层中利用自定义转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,该自定义转换算法为预先对转换精度进行自定义并存储于终端***的算法。
其中,该***转换算法可以包括调用转换脚本和调用目标接口函数,其中,目标接口函数为对终端***的接口函数进行修改后得到的接口函数。比如,当该初始预览图像数据的优化指标为图像处理速度时,可以判断该初始预览图像数据是否需要裁剪。当该初始预览图像数据不需要裁剪时,可以直接调用***的转换脚本,对该初始预览图像数据进行格式转换。当该初始预览图像数据需要裁剪时,可以调用对***接口函数修改后的目标接口函数对该初始预览图像数据进行格式转换。
比如,具体可以当该初始预览图像数据不需要裁剪时,在该内核层中调用转换脚本对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据;当该初始预览图像数据需要裁剪时,在该内核层中调用目标接口函数对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,该目标接口函数为对终端***的接口函数进行修改后得到的接口函数。
其中,调用目标接口函数对初始预览图像数据进行转换,可以先将第一颜色编码格式的初始预览图像数据的参数转换为参数值,在执行***提供的接口来转换格式,通过输入xOffset和yOffset的偏移量来控制裁剪区域,以得到第二颜色编码格式的预览图像数据。比如,当第一颜色编码格式的初始预览图像数据为YUV格式数据时,可以将YUV数据中的Y、U、V三个分量分离开,再转换为RGB格式数据。
比如,具体可以当该目标图像转换方式为第一图像转换方式时,在该内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;将该亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据;根据预设偏移量对该第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
其中,预设偏移量的设定方式可以有很多种,比如,可以根据实际应用的需求灵活设置,也可以预先设置好存储在终端中。此外,预设偏移量可以内置于终端中,或者,也可以保存在存储器中并发送给终端,等等。
例如,当该初始预览图像数据的优化指标为图像处理精度时,可以使用自定义转换方式,比如,可以为自定义转换公式,以实现图像精度的保留。其中,自定义转换公式可以如下:
r=y+(1.370705*v)
g=y-(0.337633*u)–(0.698001*v)
b=y+(1.732446*u)
比如,具体可以当该目标图像转换方式为第二图像转换方式时,在该内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;利用自定义转换方式对该亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据,该自定义转换方式为预先对格式转换的精度进行自定义并存储在终端***中的转换方式;根据预设偏移量对该第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
105、在该应用层显示该预览图像数据。
由于拍照的场景可能存在镜像和旋转的情况,所以需要对预处理后得到的RGB数据进行空间变换。因为RGB数组的旋转和镜像原理是对RGB数据的坐标进行变换,所以实现对坐标的变换,就能够很好的实现对数据的处理操作。其中,空间变换指的是对预览图像数据进行镜像、旋转等处理操作。
比如,具体可以判断该预览图像数据是否需要进行空间变换,当该预览图像数据需要进行空间变换时,获取该预览图像数据中每个像素点的坐标,将该预览图像数据中每个像素点的坐标进行坐标变换,得到变换后预览图像数据,则此时,该在该应用层显示该预览图像数据,具体可以为在该应用层显示该变换后预览图像数据。当该预览图像数据不需要进行空间变换时,则在该应用层显示直接该预览图像数据。
由上可知,本实施例可以在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,该第一颜色编码格式为适用于该内核层的颜色编码格式,然后,在终端***的应用层确定该初始预览图像数据处理的优先指标,接着,基于该优先指标,在该内核层的多个候选图像转换方式中确定目标图像转换方式,再基于该目标图像转换方式,在该内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,该第二颜色编码格式为适用于该应用层的颜色编码格式,再然后,在该应用层显示该预览图像数据。由于该方案可以根据初始预览图像数据处理的优先指标的不同,在多个候选图像转换方式选择目标图像转换方式,并在终端***的内核层中对初始预览图像数据的格式进行转换,有效地提高了终端图像处理的效率。
根据前面实施例所描述的方法,以下将以该图像处理装置具体集成在终端中,终端***为Android***为例作进一步详细说明。
本申请实施例提供的图像处理方法可以包括:
(一)首先,需要进行拍照前的环境搭建,具体可以如下:
将Camera Api配置成Camera Api2,选择最后的成像载体为YUV_420_888的格式来替换传统方式的JPEG格式,即用户拍摄时获取到的初始预览图像数据为YUV_420_888格式。
由于将获取到的初始图像数据用YUV数据承载,同时利用Android***的RenderScript技术来实现图像处理和格式转换的操作,就可以实现图像后处理能力和生成速度的优化。其中,RenderScript是安卓提供的一个高效计算平台。它显著的特点在于能够自动利用各种核心,包括CPU,GPU以及DSP等,来进行并行计算,能大大提高在图片处理、数学模型等领域提供高效的计算能力,且不需要针对不同的核心平台而编写不同的代码,因为RenderScript是在设备上进行运行时编译的。
(二)其次,通过该搭建好的环境,对终端的图像数据进行处理,具体可参见图2a和图2b。
请参阅图2a,图2a为本申请实施例提供的图像处理方法的第二流程示意图。具体流程可以如下:
201、终端接收到用户触发的拍摄请求。
例如,当用户触发终端相机的拍摄功能时,终端可以生成拍摄请求。当终端检测到用户触发拍摄功能时,执行步骤202;若终端未检测到用户的触发操作,则终端暂不执行步骤202。
202、终端在接收到该拍摄请求后,在自身***(即终端***)的内核层中获取第一颜色编码格式的初始预览图像数据,然后执行步骤203。
其中,该第一颜色编码格式为适用于该内核层的颜色编码格式,比如,具体可以为YUV_420_888格式。
例如,终端在接收到该拍摄请求后,在自身***(即终端***)的内核层中接收采集到YUV_420_888格式的初始预览图像数据。终端可以根据业务情况分为数据预处理阶段和数据处理阶段。
数据预处理阶段通过ImageReader获取到Image(图像)格式的YUV_420_888格式的数据,将对应的Y、U、V分量的数据填充到Renderscript的参数中,这部分逻辑可以根据业务情况选择3种方式,分别是纯API、半API和全自定义三种方式。比如,业务只是需要转换格式,可以使用纯API方式(即***转换算法中的调用转换脚本);业务需要转换格式同时还需要执行裁剪和旋转等操作,可以使用半API方式(即***转换算法中的调用目标接口函数);业务需要转换格式同时还需要执行裁剪和旋转等操作,且需要保留精度的情况下,可以使用全自定义方式(即自定义转换算法),具体流程可以参见图2b。
其中,ImageReader为Android中的一个类,ImageReader类允许应用程序直接访问呈现表面的图像数据。
203、终端在自身***(即终端***)的应用层确定该初始预览图像数据处理的优先指标。
例如,终端具体可以在自身***(即终端***)的应用层确定该初始预览图像数据的显示需求,根据该显示需求确定该初始预览图像数据处理的优先指标。
比如,业务只是需要转换格式,如在应用层中全屏显示预览图像数据,不需要裁剪的情况下,确定该初始预览图像数据处理的优先指标为图像处理速度;比如,业务需要转换格式同时还需要执行裁剪和旋转等操作,如适应屏幕显示的大小,需要对图像进行裁剪的情况下,确定该初始预览图像数据处理的优先指标为图像处理速度;又比如,该初始预览图像数据需要保留精度时,如在转换格式的同时不能损失精度的情况下,则确定该初始预览图像数据处理的优先指标为图像处理精度,等等。
204、基于该优先指标,终端在该内核层的多个候选图像转换方式中确定目标图像转换方式。
例如,终端具体可以当该优先指标为图像处理速度,从多个候选图像转换方式中确定目标图像转换方式为第一图像转换方式,即利用自身***的***转换算法进行转换;当该优先指标为图像处理精度,从多个候选图像转换方式中确定目标图像转换方式为第二图像转换方式,即利用预先自定义并存储在终端***中的转换算法进行转换。
205、基于该目标图像转换方式,终端在该内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据。
(一)例如,终端具体可以当该目标图像转换方式为第一图像转换方式时,在该内核层中利用终端***的***转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据。
其中,该***转换算法可以包括调用转换脚本和调用目标接口函数,其中,目标接口函数为对终端***的接口函数进行修改后得到的接口函数。
比如,当该目标图像转换方式为第一图像转换方式时,终端可以判断该初始预览图像数据是否需要裁剪。
(1)当该初始预览图像数据不需要裁剪时,可以直接调用***的转换脚本,对该初始预览图像数据进行格式转换。比如,业务只是需要转换格式,可以使用Renderscript自带的转换算法来操作,这里可以参考***自带的转换算法来转换,部分参考如下所示:
Figure GDA0004110972640000131
(2)当该初始预览图像数据需要裁剪时,可以调用对***接口函数修改后的目标接口函数对该初始预览图像数据进行格式转换。比如,终端具体可以当该目标图像转换方式为第一图像转换方式且该初始预览图像数据需要裁剪时,在该内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;将该亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据;根据预设偏移量对该第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
比如,业务需要转换格式同时还需要执行裁剪和旋转等操作时,可以利用对***的API进行修改,自定义出一套适合该业务场景的算法,通过在Renderscript的rsGetElementAtYuv_uchar_Y和rsGetElementAt_uchar将参数转换为对应的参数值,再执行***提供的接口rsYuvToRGBA_uchar来转换格式,然后用输入xOffset和yOffset的偏移量来控制裁剪区域。其中,部分代码可以如下所示:
Figure GDA0004110972640000141
Figure GDA0004110972640000151
(二)例如,终端具体可以当该目标图像转换方式为第二图像转换方式时,在该内核层中利用自定义转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据。
例如,当该初始预览图像数据的优化指标为图像处理精度时,可以使用自定义转换方式,比如,业务需要转换格式同时还需要执行裁剪和旋转等操作时,会损失精度的情况下,使用全自定义算法的方式,将Renderscript作为一个运算平台,利用自定义的Yuv和Rgb的转换公式来替换调用目标接口函数方式的重要实现部分,以实现对精度的保留,其他的裁剪按照使用调用目标接口函数的同样偏移方式来实现即可。其中,自定义转换公式可以如下:
Figure GDA0004110972640000152
206、当该预览图像数据需要进行空间变换时,终端将该预览图像数据中每个像素点的坐标进行坐标变换,得到变换后预览图像数据。
数据处理阶段的操作主要根据业务需求来定义,由于拍照的场景存在镜像和旋转的情况,所以需要对预处理后的到的RGB数据进行转换。因为RGB数组的旋转和镜像原理是对RGB数据的坐标进行变换,所以可以使用Renderscript中的rsGetElementAt来实现对坐标的变换,就可以很好的实现对数据的处理操作。其中,空间变换指的是对预览图像数据进行镜像、旋转等处理操作。
比如,终端具体可以判断该预览图像数据是否需要进行空间变换,当该预览图像数据需要进行空间变换时,获取该预览图像数据中每个像素点的坐标,将该预览图像数据中每个像素点的坐标进行坐标变换,得到变换后预览图像数据。比如,该预览图像数据需要进行镜像操作的部分实现代码可以如下:
Figure GDA0004110972640000161
Figure GDA0004110972640000171
207、终端在该应用层显示该变换后预览图像数据。
例如,当该预览图像数据需要进行空间变换时,在应用层显示该变换后预览图像数据;当该预览图像数据不需要进行空间变换时,则在应用层显示直接该预览图像数据。
通过使用Renderscript技术(算法五)来加速了图像处理的过程,比传统的Bitmap转换算法(算法一)能够达到约3~4倍的加速效果,如下表1所示:
表1
算法一 算法二 算法三 算法四 算法五
终端1 272.5 276.5 169.5 147 97
终端2 350.5 280.5 192.5 172.5 99.5
其中,算法二为只使用***转换算法中的调用转换脚本方式,算法三为只使用***转换算法中的调用目标接口函数方式,算法四为只使用自定义转换算法。
在细节上,通过对数据采集、格式转换等场景的裁剪和优化,能够使得部分节点的耗时进一步减少,能够实现比初始算法有接近1倍的加速效果,如下表2所示:
表2
Figure GDA0004110972640000172
目前在renderscript可以通过对多个算法进行集合,减少中间数据读取和输出的操作,随着图像操作业务的增加,优化的效果将会比现有的方案更加明显。由于在利用renderscript进行图像格式转换以及空间变换等操作时,可以对初始预览图像数据和预览图像数据中的每个像素点进行多线程处理,即所有像素点同时处理,可以大大提升了图像处理的速度,提高了图像处理的效率。
由上可知,本实施例的终端可以在自身***(即终端***)的内核层中获取第一颜色编码格式的初始预览图像数据,该第一颜色编码格式为适用于该内核层的颜色编码格式,然后,在自身***(即终端***)的应用层确定该初始预览图像数据处理的优先指标,接着,基于该优先指标,在该内核层的多个候选图像转换方式中确定目标图像转换方式,再基于该目标图像转换方式,在该内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,该第二颜色编码格式为适用于该应用层的颜色编码格式,再然后,在该应用层显示该预览图像数据。由于该方案可以根据初始预览图像数据处理的优先指标的不同,在多个候选图像转换方式选择目标图像转换方式,并在终端***的内核层中对初始预览图像数据的格式进行转换,有效地提高了终端图像处理的效率。
为了更好地实施本申请实施例提供的图像处理方法,本申请实施例还提供一种图像处理装置,该图像处理装置可以集成在终端中,该终端可以是手机、平板电脑、掌上电脑、笔记本电脑以及个人计算机等可以实现图像处理的设备。其中名词的含义与上述图像处理方法中相同,具体实现细节可以参考方法实施例中的说明。
例如,如图3所示,该接口调用装置可以包括获取单元301、第一确定单元302、第二确定单元303、转换单元304和显示单元305,如下:
(1)获取单元301;
获取单元301,用于在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式。
可选的,在一些实施例中,在所述图像处理装置中,还包括设置单元306,如下:
所述设置单元306,用于对终端***的拍摄接口进行配置;以及设置所述终端***的拍摄成像格式为第一颜色编码格式;
则所述获取单元301,具体用于当检测到用户针对终端的拍摄操作时,在所述终端***的内核层中获取到第一颜色编码格式的初始预览图像数据。
(2)第一确定单元302;
第一确定单元302,用于在终端***的应用层确定所述初始预览图像数据处理的优先指标。
可选的,在一些实施例中,在所述图像处理装置中,所述第一确定单元302,具体用于在终端***的应用层确定所述初始预览图像数据的显示需求;根据所述显示需求确定所述初始预览图像数据处理的优先指标。
(3)第二确定单元303;
第二确定单元303,用于基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式。
可选的,在一些实施例中,在所述图像处理装置中,所述优先指标包括图像处理速度和图像处理精度,所述第二确定单元303包括第一确定子单元和第二确定子单元,如下:
所述第一确定子单元,用于当所述优先指标为图像处理速度,从多个候选图像转换方式中确定目标图像转换方式为第一图像转换方式;
所述第二确定子单元,用于当所述优先指标为图像处理精度,从多个候选图像转换方式中确定目标图像转换方式为第二图像转换方式。
(4)转换单元304;
转换单元304,用于基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式。
可选的,在一些实施例中,在所述图像处理装置中,所述转换单元包括第一转换子单元和第二转换子单元,如下:
所述第一转换子单元,用于当所述目标图像转换方式为第一图像转换方式时,在所述内核层中利用终端***的***转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,所述***转换算法为终端***自带的格式转换算法;
所述第二转换子单元,用于当所述目标图像转换方式为第二图像转换方式时,在所述内核层中利用自定义转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,所述自定义转换算法为预先对转换精度进行自定义并存储于终端***的算法。
可选的,在一些实施例中,在所述图像处理装置中,所述***转换算法包括调用转换脚本和调用目标接口函数,所述第一转换子单元,具体用于当所述初始预览图像数据不需要裁剪时,在所述内核层中调用转换脚本对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据;当所述初始预览图像数据需要裁剪时,在所述内核层中调用目标接口函数对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,所述目标接口函数为对终端***的接口函数进行修改后得到的接口函数。
可选的,在一些实施例中,在所述图像处理装置中,所述第一转换子单元,具体用于当所述目标图像转换方式为第一图像转换方式时,在所述内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;将所述亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据;根据预设偏移量对所述第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
可选的,在一些实施例中,在所述图像处理装置中,所述第二转换子单元,具体用于当所述目标图像转换方式为第二图像转换方式时,在所述内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;利用自定义转换方式对所述亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据,所述自定义转换方式为预先对格式转换的精度进行自定义并存储在终端***中的转换方式;根据预设偏移量对所述第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
(5)显示单元305;
显示单元305,用于在所述应用层显示所述预览图像数据。
可选的,在一些实施例中,在所述图像处理装置中,还包括空间变换单元307,如下:
所述空间变换单元307,用于当所述预览图像数据需要进行空间变换时,获取所述预览图像数据中每个像素点的坐标;将所述预览图像数据中每个像素点的坐标进行坐标变换,得到变换后预览图像数据;
则所述显示单元305,用于在所述应用层显示所述变换后预览图像数据。
具体实施时,以上各个单元可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个单元的具体实施可参见前面的方法实施例,在此不再赘述。
由上可知,本实施例的图像处理装置可以由获取单元301在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式,然后,由第一确定单元302在终端***的应用层确定所述初始预览图像数据处理的优先指标,接着,由第二确定单元303基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式,再由转换单元304基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式,再然后,由显示单元305在所述应用层显示所述预览图像数据。由于该方案可以根据初始预览图像数据处理的优先指标的不同,在多个候选图像转换方式选择目标图像转换方式,并在终端***的内核层中对初始预览图像数据的格式进行转换,有效地提高了终端图像处理的效率。
相应的,本申请实施例还提供一种终端,如图4所示,该终端可以用于实施上述实施例中提供的图像处理方法和装置。该终端可以包括射频(RF,Radio Frequency)电路401、包括有一个或一个以上计算机可读存储介质的存储器402、输入单元403、显示单元404、传感器405、音频电路406、无线保真(WiFi,Wireless Fidelity)模块407、包括有一个或者一个以上处理核心的处理器408、以及电源409等部件。本领域技术人员可以理解,图4中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
RF电路401可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器408处理;另外,将涉及上行的数据发送给基站。通常,RF电路401包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM,Subscriber Identity Module)卡、收发信机、耦合器、低噪声放大器(LNA,Low Noise Amplifier)、双工器等。此外,RF电路401还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯***(GSM,Global System of Mobile communication)、通用分组无线服务(GPRS,GeneralPacket Radio Service)、码分多址(CDMA,Code Division Multiple Access)、宽带码分多址(WCDMA,Wideband Code Division Multiple Access)、长期演进(LTE,Long TermEvolution)、电子邮件、短消息服务(SMS,Short Messaging Service)等。
存储器402可用于存储软件程序以及模块,处理器408通过运行存储在存储器402的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据终端的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器408和输入单元403对存储器402的访问。
输入单元403可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,在一个具体的实施例中,输入单元403可包括触敏表面以及其他输入设备。触敏表面,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面上或在触敏表面附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器408,并能接收处理器408发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面。除了触敏表面,输入单元403还可以包括其他输入设备。具体地,其他输入设备可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元404可用于显示由用户输入的信息或提供给用户的信息以及终端的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元404可包括显示面板,可选的,可以采用液晶显示器(LCD,Liquid Crystal Display)、有机发光二极管(OLED,Organic Light-Emitting Diode)等形式来配置显示面板。进一步的,触敏表面可覆盖显示面板,当触敏表面检测到在其上或附近的触摸操作后,传送给处理器408以确定触摸事件的类型,随后处理器408根据触摸事件的类型在显示面板上提供相应的视觉输出。虽然在图4中,触敏表面与显示面板是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面与显示面板集成而实现输入和输出功能。
终端还可以包括至少一种传感器405,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板的亮度,接近传感器可在终端移动到耳边时,关闭显示面板和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于终端还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路406、扬声器,传声器可提供用户与终端之间的音频接口。音频电路406可将接收到的音频数据转换后的电信号,传输到扬声器,由扬声器转换为声音信号输出;另一方面,传声器将收集的声音信号转换为电信号,由音频电路406接收后转换为音频数据,再将音频数据输出处理器408处理后,经RF电路401以发送给比如另一终端,或者将音频数据输出至存储器402以便进一步处理。音频电路406还可能包括耳塞插孔,以提供外设耳机与终端的通信。
WiFi属于短距离无线传输技术,终端通过WiFi模块407可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图4示出了WiFi模块407,但是可以理解的是,其并不属于终端的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器408是终端的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行终端的各种功能和处理数据,从而对手机进行整体处理。可选的,处理器408可包括一个或多个处理核心;优选的,处理器408可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作***、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器408中。
终端还包括给各个部件供电的电源409(比如电池),优选的,电源可以通过电源管理***与处理器408逻辑相连,从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。电源409还可以包括一个或一个以上的直流或交流电源、再充电***、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出,终端还可以包括摄像头、蓝牙模块等,在此不再赘述。具体在本实施例中,终端中的处理器408会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中,并由处理器408来运行存储在存储器402中的应用程序,从而实现各种功能:
在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式,然后,在终端***的应用层确定所述初始预览图像数据处理的优先指标,接着,基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式,再基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式,再然后,在所述应用层显示所述预览图像数据。
以上各个操作具体可参见前面的实施例,在此不再赘述。
由上可知,本实施例的终端可以在自身***(即终端***)的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式,然后,在自身***(即终端***)的应用层确定所述初始预览图像数据处理的优先指标,接着,基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式,再基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式,再然后,在所述应用层显示所述预览图像数据。由于该方案可以根据初始预览图像数据处理的优先指标的不同,在多个候选图像转换方式选择目标图像转换方式,并在终端***的内核层中对初始预览图像数据的格式进行转换,有效地提高了终端图像处理的效率。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本申请实施例所提供的任一种应用于分享终端的网络流量资源分享方法中的步骤。例如,该指令可以执行如下步骤:
在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式,然后,在终端***的应用层确定所述初始预览图像数据处理的优先指标,接着,基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式,再基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式,再然后,在所述应用层显示所述预览图像数据。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本申请实施例所提供的任一种应用于图像处理方法中的步骤,因此,可以实现本申请实施例所提供的任一种应用于图像处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种图像处理方法、装置、终端和存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种图像处理方法,其特征在于,包括:
配置终端***的拍摄接口,并将所述终端***的拍摄成像格式设置为第一颜色编码格式;
在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式;
在终端***的应用层确定所述初始预览图像数据处理的优先指标;
基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式;
基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式;
在所述应用层显示所述预览图像数据。
2.根据权利要求1所述的方法,其特征在于,所述优先指标包括图像处理速度和图像处理精度,所述基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式,包括:
当所述优先指标为图像处理速度,从多个候选图像转换方式中确定目标图像转换方式为第一图像转换方式;
当所述优先指标为图像处理精度,从多个候选图像转换方式中确定目标图像转换方式为第二图像转换方式。
3.根据权利要求2所述的方法,其特征在于,所述基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,包括:
当所述目标图像转换方式为第一图像转换方式时,在所述内核层中利用终端***的***转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,所述***转换算法为终端***自带的格式转换算法;
当所述目标图像转换方式为第二图像转换方式时,在所述内核层中利用自定义转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,所述自定义转换算法为预先对转换精度进行自定义并存储于终端***的算法。
4.根据权利要求3所述的方法,其特征在于,所述***转换算法包括调用转换脚本和调用目标接口函数,所述在所述内核层中利用终端***的转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,包括:
当所述初始预览图像数据不需要裁剪时,在所述内核层中调用转换脚本对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据;
当所述初始预览图像数据需要裁剪时,在所述内核层中调用目标接口函数对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,其中,所述目标接口函数为对终端***的接口函数进行修改后得到的接口函数。
5.根据权利要求4所述的方法,其特征在于,所述当所述初始预览图像数据需要裁剪时,在所述内核层中调用目标接口函数对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,包括:
当所述目标图像转换方式为第一图像转换方式时,在所述内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;
将所述亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据;
根据预设偏移量对所述第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
6.根据权利要求3所述的方法,其特征在于,所述自定义转换算法包括调用目标接口函数和自定义转换方式,所述当所述目标图像转换方式为第二图像转换方式时,在所述内核层中利用自定义转换算法对初始预览图像数据进行转换,得到第二颜色编码格式的预览图像数据,包括:
当所述目标图像转换方式为第二图像转换方式时,在所述内核层调用目标接口函数将第一颜色编码格式的初始预览图像数据中的参数进行分离,得到亮度分量、饱和度分量和色度分量;
利用自定义转换方式对所述亮度分量、饱和度分量和色度分量进行格式转换,得到第二颜色编码格式的目标预览图像数据,所述自定义转换方式为预先对格式转换的精度进行自定义并存储在终端***中的转换方式;
根据预设偏移量对所述第二颜色编码格式的目标预览图像数据进行裁剪,得到第二颜色编码格式的预览图像数据。
7.根据权利要求1所述的方法,其特征在于,所述在终端***的应用层确定所述初始预览图像数据处理的优先指标,包括:
在终端***的应用层确定所述初始预览图像数据的显示需求;
根据所述显示需求确定所述初始预览图像数据处理的优先指标。
8.根据权利要求1所述的方法,其特征在于,所述基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据之后,还包括:
当所述预览图像数据需要进行空间变换时,获取所述预览图像数据中每个像素点的坐标;
将所述预览图像数据中每个像素点的坐标进行坐标变换,得到变换后预览图像数据;
所述在所述应用层显示所述预览图像数据,包括:在所述应用层显示所述变换后预览图像数据。
9.根据权利要求1所述的方法,其特征在于,所述在终端***的内核层中获取第一颜色编码格式的初始预览图像数据之前,还包括:
对终端***的拍摄接口进行配置;以及
设置所述终端***的拍摄成像格式为第一颜色编码格式;
所述在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,包括:当检测到用户针对终端的拍摄操作时,在所述终端***的内核层中获取到第一颜色编码格式的初始预览图像数据。
10.一种图像处理装置,其特征在于,包括:
获取单元,用于配置终端***的拍摄接口,并将所述终端***的拍摄成像格式设置为第一颜色编码格式;在终端***的内核层中获取第一颜色编码格式的初始预览图像数据,所述第一颜色编码格式为适用于所述内核层的颜色编码格式;
第一确定单元,用于在终端***的应用层确定所述初始预览图像数据处理的优先指标;
第二确定单元,用于基于所述优先指标,在所述内核层的多个候选图像转换方式中确定目标图像转换方式;
转换单元,用于基于所述目标图像转换方式,在所述内核层中将初始预览图像数据转换为第二颜色编码格式的预览图像数据,所述第二颜色编码格式为适用于所述应用层的颜色编码格式;
显示单元,用于在所述应用层显示所述预览图像数据。
11.一种终端,包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述程序时实现如权利要求1至9任一项所述方法的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1至9中任一项所述的图像处理方法中的步骤。
CN202010597481.4A 2020-06-28 2020-06-28 图像处理方法、装置、终端和存储介质 Active CN113852751B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010597481.4A CN113852751B (zh) 2020-06-28 2020-06-28 图像处理方法、装置、终端和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010597481.4A CN113852751B (zh) 2020-06-28 2020-06-28 图像处理方法、装置、终端和存储介质

Publications (2)

Publication Number Publication Date
CN113852751A CN113852751A (zh) 2021-12-28
CN113852751B true CN113852751B (zh) 2023-05-30

Family

ID=78972065

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010597481.4A Active CN113852751B (zh) 2020-06-28 2020-06-28 图像处理方法、装置、终端和存储介质

Country Status (1)

Country Link
CN (1) CN113852751B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116828198B (zh) * 2023-08-29 2023-11-28 麒麟软件有限公司 在nvidia gpu上支持va-api硬件视频加速接口的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101098333A (zh) * 2007-07-11 2008-01-02 北京中星微电子有限公司 一种数据处理的方法和装置
CN101290228A (zh) * 2007-04-17 2008-10-22 北京协进科技发展有限公司 一种基于移动终端的地图数据处理方法、***及移动终端
CN104994277A (zh) * 2015-06-30 2015-10-21 青岛海信移动通信技术股份有限公司 一种移动通信终端快速拍照的方法和装置
CN105183603A (zh) * 2015-10-08 2015-12-23 广东欧珀移动通信有限公司 终端显示屏效果调试方法和***
CN109616114A (zh) * 2018-12-29 2019-04-12 苏州思必驰信息科技有限公司 智能终端语音加密的***、配置方法及加密方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8930737B2 (en) * 2011-12-13 2015-01-06 Omx Technology Ab Method and devices for controlling operations of a central processing unit

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101290228A (zh) * 2007-04-17 2008-10-22 北京协进科技发展有限公司 一种基于移动终端的地图数据处理方法、***及移动终端
CN101098333A (zh) * 2007-07-11 2008-01-02 北京中星微电子有限公司 一种数据处理的方法和装置
CN104994277A (zh) * 2015-06-30 2015-10-21 青岛海信移动通信技术股份有限公司 一种移动通信终端快速拍照的方法和装置
CN105183603A (zh) * 2015-10-08 2015-12-23 广东欧珀移动通信有限公司 终端显示屏效果调试方法和***
CN109616114A (zh) * 2018-12-29 2019-04-12 苏州思必驰信息科技有限公司 智能终端语音加密的***、配置方法及加密方法

Also Published As

Publication number Publication date
CN113852751A (zh) 2021-12-28

Similar Documents

Publication Publication Date Title
CN108287744B (zh) 文字显示方法、装置及存储介质
US10510136B2 (en) Image blurring method, electronic device and computer device
CN106708538B (zh) 界面显示方法及装置
AU2018273505B2 (en) Method for capturing fingerprint and associated products
CN113313804B (zh) 一种图像渲染方法、装置、电子设备和存储介质
KR102184308B1 (ko) 이미지 합성 방법, 장치 및 비휘발성 컴퓨터 판독 가능 매체
CN111182236A (zh) 一种图像合成方法、装置、存储介质及终端设备
CN111966436A (zh) 屏幕显示控制方法、装置、终端设备及存储介质
CN113852751B (zh) 图像处理方法、装置、终端和存储介质
CN111556248B (zh) 拍摄方法、装置、存储介质及移动终端
CN111275607B (zh) 界面显示方法、装置、计算机设备及存储介质
CN106454083B (zh) 一种移动终端的图像采集方法、装置及移动终端
CN107632985B (zh) 网页预加载方法及装置
CN111026457B (zh) 一种硬件配置方法、装置、存储介质及终端设备
CN109922256B (zh) 拍摄方法及终端设备
CN108376255B (zh) 一种图像处理方法、装置及存储介质
CN112261634B (zh) 一种蓝牙传输控制方法、装置、终端设备和存储介质
CN112867171B (zh) Wifi连接方法、装置、存储介质及移动终端
CN110717486A (zh) 文本检测方法、装置、电子设备和存储介质
CN112181266B (zh) 图形码识别方法、装置、终端以及存储介质
CN111966271B (zh) 屏幕全景截图方法、装置、终端设备和存储介质
CN111026488B (zh) 通信数据保存方法、装置、终端设备和存储介质
CN112468725B (zh) 照片拍摄方法、装置、存储介质及移动终端
CN108959073B (zh) 算法库的测试方法、装置、存储介质和电子设备
CN117392934A (zh) 图像处理方法、装置、存储介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant