CN114675922B - 显示数据处理方法、装置、存储介质与电子设备 - Google Patents
显示数据处理方法、装置、存储介质与电子设备 Download PDFInfo
- Publication number
- CN114675922B CN114675922B CN202210356533.8A CN202210356533A CN114675922B CN 114675922 B CN114675922 B CN 114675922B CN 202210356533 A CN202210356533 A CN 202210356533A CN 114675922 B CN114675922 B CN 114675922B
- Authority
- CN
- China
- Prior art keywords
- data
- display data
- display
- statistics
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000004364 calculation method Methods 0.000 claims abstract description 38
- 238000000034 method Methods 0.000 claims abstract description 35
- 230000015654 memory Effects 0.000 claims abstract description 26
- 238000012545 processing Methods 0.000 claims abstract description 25
- 230000007246 mechanism Effects 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 238000012546 transfer Methods 0.000 description 5
- 230000000875 corresponding effect Effects 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 238000013139 quantization Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000005693 optoelectronics Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 241001270131 Agaricus moelleri Species 0.000 description 1
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- HCJLHZAGGWZIAU-SRZZPIQSSA-N methyl 2-[4-(4-chlorophenyl)-2-[(E)-(2-hydroxyphenyl)methylideneamino]-1,3-thiazol-5-yl]acetate Chemical compound COC(=O)Cc1sc(\N=C\c2ccccc2O)nc1-c1ccc(Cl)cc1 HCJLHZAGGWZIAU-SRZZPIQSSA-N 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本公开提供显示数据处理方法、装置、计算机可读存储介质与电子设备，涉及计算机技术领域。所述方法应用于第一处理器，所述方法包括：获取显示数据的第一统计数据；所述显示数据用于在显示屏上进行显示，所述第一统计数据是由第二处理器对所述显示数据进行颜色分布统计所得到；根据所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据。本公开针对显示数据处理时功耗过大的情况，减少了显示数据的计算量，从而节省了大量内存搬运和计算带来的功耗，同时降低了对总线带宽的占用。
Description
技术领域
本公开涉及计算机技术领域，尤其涉及一种显示数据处理方法、装置、计算机可读存储介质与电子设备。
背景技术
在具备显示屏的电子设备中，经常需要对显示屏的显示数据进行统计或计算。例如，根据屏下感光传感器上方的显示屏的显示数据进行统计或计算，可以得到显示屏的显示数据对屏下感光传感器的影响量；基于显示屏指定区域的显示数据进行亮度计算，可以控制导航栏本身的颜色，从而降低导航栏颜色与背景颜色的相似度，提高导航栏的识别度。
相关技术中，对显示数据的处理通常需要占用较多的存储空间、总线带宽等资源，并容易导致较高的功耗。
需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域技术人员已知的现有技术的信息。
发明内容
本公开提供显示数据处理方法、装置、计算机可读存储介质与电子设备，进而至少在一定程度上降低处理显示数据时的资源占用与功耗。
根据本公开的第一方面，提供一种显示数据处理方法，应用于第一处理器，所述方法包括：获取显示数据的第一统计数据；所述显示数据用于在显示屏上进行显示，所述第一统计数据是由第二处理器对所述显示数据进行颜色分布统计所得到；根据所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据。
根据本公开的第二方面，提供一种显示数据处理方法，应用于第二处理器，所述方法包括：获取显示数据；所述显示数据用于在显示屏上进行显示；对所述显示数据进行颜色分布统计，得到所述显示数据的第一统计数据；输出所述第一统计数据，使第一处理器获取所述第一统计数据并对所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据。
根据本公开的第三方面，提供一种显示数据处理装置，应用于第一处理器，所述装置包括：数据获取模块，被配置为获取显示数据的第一统计数据；所述显示数据用于在显示屏上进行显示，所述第一统计数据是由第二处理器对所述显示数据进行颜色分布统计所得到；数据计算模块，被配置为根据所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据。
根据本公开的第四方面，提供一种显示数据处理装置，应用于第二处理器，所述装置包括：数据获取模块，被配置为获取显示数据；所述显示数据用于在显示屏上进行显示；数据计算模块，被配置为对所述显示数据进行颜色分布统计，得到所述显示数据的第一统计数据；数据输出模块，被配置为输出所述第一统计数据，使第一处理器获取所述第一统计数据并对所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据。
根据本公开的第五方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述第一或第二方面的电子设备的数据处理方法及其可能的实现方式。
根据本公开的第六方面，提供一种电子设备，包括：第一处理器；第二处理器；显示屏；以及存储器，用于存储可执行指令；其中，所述第一处理器配置为经由执行所述可执行指令来实现上述第一方面的方法及其可能的实现方式；或者所述第二处理器配置为经由执行所述可执行指令来实现上述第二方面的电子设备的方法及其可能的实现方式。
本公开的技术方案具有以下有益效果：
在进行显示数据处理时，第一处理器获取显示数据的第一统计数据，所述第一统计数据由第二处理器对所述显示数据进行颜色分布统计所得到。第一处理器获取的是对显示数据进行颜色分布统计后得到的第一统计数据，而不再是原始的显示数据，改善了大量内存数据搬运的问题，节省了功耗；本方案将原始的显示数据替换为所述第一统计数据进行颜色均值计算，减小了因计算量过大导致的功耗，同时降低了对总线带宽的占用。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出本示例性实施方式中一种电子设备的示意图；
图2示出本示例性实施方式中一种移动终端的示意图；
图3示出本示例性实施方式中一种应用于第一处理器的显示数据处理方法的流程图；
图4示出本示例性实施方式中一种颜色均值计算方法的流程图；
图5示出本示例性实施方式中一种应用于第二处理器的显示数据处理方法的流程图；
图6示出本示例性实施方式中一种应用于第二处理器获取显示数据过程示意图；
图7示出本示例性实施方式中一种应用于第二处理器的架构示意图；
图8示出本示例性实施方式中一种显示数据处理方法的交互流程图；
图9示出本示例性实施方式中一种显示数据处理装置的结构示意图；
图10示出本示例性实施方式中另一种显示数据处理装置的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中，提供许多具体细节从而给出对本公开的实施方式的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而省略所述特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。
此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
相关技术的一种方案中，通过图形处理器(Graphics Processing Unit，GPU)截图获取感光传感器上方区域的显示内容，再通过GPU进行数据重绘，以实现对显示数据的处理，该方案不仅需要占用GPU的资源，还增加了功耗。
鉴于上述问题，本公开的示例性实施方式提供一种显示数据处理方法以及实现该方法的电子设备。下面首先结合图1对本示例性实施方式中的电子设备进行说明。
参考图1所示，该电子设备100可以包括第一处理器110、第二处理器120、显示屏130与存储器140。第一处理器110用于执行电子设备100的主要逻辑处理，例如可以运行电子设备100的操作***与应用程序。第二处理器120用于执行电子设备100的显示数据处理，例如可以将显示屏130的显示内容转换成能够被第一处理器110处理的显示数据。显示屏130用于显示数据。存储器140用于存储可执行指令，该可执行指令可以被主处理器110或显示处理器120执行，以实现相应的功能。上述第一处理器110、第二处理器120、显示屏130与存储器140可以通过总线相连。
在一种实施方式中，上述电子设备100可以是移动终端。下面结合图2中的移动终端200做进一步说明。本领域技术人员应当理解，除了特别用于移动目的的部件之外，图2中的构造也能够应用于固定类型的设备。
如图2所示，移动终端200具体可以包括：第一处理器201、第二处理器202、存储器203、移动通信模块205、无线通信模块206、显示屏207、摄像模块208、音频模块209、电源模块210与传感器模块211。
第一处理器201与第二处理器202可以包括一个或多个处理单元，例如：第一处理器201可以包括中央处理器(Central Processing Unit，CPU)、AP(ApplicationProcessor，应用处理器)、调制解调处理器；第二处理器可以包括显示处理器(DisplayProcess Unit，DPU)、GPU、ISP(Image Signal Processor，图像信号处理器)、控制器、编码器、解码器、DSP(Digital Signal Processor，数字信号处理器)、基带处理器和/或NPU(Neural-Network Processing Unit，神经网络处理器)等。本示例性实施方式中的显示数据处理方法可以由CPU和DPU来执行。
第一处理器201与第二处理器202可以通过总线204与存储器203或其他部件形成连接。
存储器203可以用于存储计算机可执行程序代码，可执行程序代码包括指令。第一处理器201和第二处理器202通过运行存储在存储器203的指令，执行移动终端200的各种功能应用以及数据处理。存储器203还可以存储应用数据，例如存储图像，视频等文件。
移动终端200的通信功能可以通过移动通信模块205、天线1、无线通信模块206、天线2、调制解调处理器以及基带处理器等实现。天线1和天线2用于发射和接收电磁波信号。移动通信模块205可以提供应用在移动终端200上3G、4G、5G等移动通信解决方案。无线通信模块206可以提供应用在移动终端200上的无线局域网、蓝牙、近场通信等无线通信解决方案。
显示屏207用于实现显示功能，如显示用户界面、图像、视频等。摄像模块208用于实现拍摄功能，如拍摄图像、视频等。音频模块209用于实现音频功能，如播放音频，采集语音等。电源模块210用于实现电源管理功能，如为电池充电、为设备供电、监测电池状态等。
传感器模块211可以包括一种或多种传感器，其用于获取移动终端200各个方面的状态评估。例如，传感器模块中的感光传感器可以获取其上方显示屏207所显示的内容和背光值，进而由第二处理器202对传感器获取到的数据进行处理，再经过第一处理器201对数据进行计算，以得到显示屏207的所显示内容对感光传感器的影响量。
本方案分别从第一处理器110与第二处理器120两方面，对本示例性实施方式中的显示数据处理方法进行说明。
图3示出了应用于第一处理器110的显示数据处理方法的示例性流程，可以包括以下步骤S310至S320：
步骤S310，获取显示数据的第一统计数据；该显示数据用于在显示屏上进行显示，第一统计数据是由第二处理器对显示数据进行颜色分布统计所得到；
步骤S320，根据上述第一统计数据进行颜色均值计算，得到上述显示数据的第二统计数据。
基于上述方法，在进行显示数据处理时，第一处理器获取显示数据的第一统计数据，第一统计数据由第二处理器对所述显示数据进行颜色分布统计所得到。第一处理器获取的是对显示数据进行颜色分布统计后得到的第一统计数据，而不再是原始的显示数据，改善了大量内存数据的搬运，节省了功耗；本方案将原始的显示数据替换为所述第一统计数据进行颜色均值计算，减小了因计算量过大导致的功耗，同时降低了对总线带宽的占用。
下面对图3中的每个步骤进行具体说明。
参考图3，在步骤S310中，获取显示数据的第一统计数据；该显示数据用于在显示屏上进行显示，第一统计数据是由第二处理器对显示数据进行颜色分布统计所得到。
其中，显示数据可以是显示屏上每个像素点的颜色数据，或者显示屏的某个感兴趣区域内像素点的颜色数据。本公开对于显示数据的具体格式不做限定，例如显示数据可以是RGB数据，也可以是YUV数据等。
第二处理器在获取显示数据后，可以根据显示数据控制显示屏显示相应的内容，还可以对显示数据进行一定的处理，再根据处理后的数据控制显示屏显示相应的内容。
本示例性实施方式中，第二处理器可以对显示数据进行颜色分布统计，得到显示数据的第一统计数据。颜色分布统计可以是对显示数据的颜色数值分布情况进行统计，比如可以统计每个颜色数值区间内的像素点的数量；还可以对显示数据的颜色参量进行统计，比如可以统计显示数据的色调，色饱和度和亮度，以确定颜色的类别和深浅程度。第一统计数据是颜色分布统计的结果，可以是显示数据的像素点统计数据，还可以是显示数据的颜色参量统计数据或其他类型的统计数据，本公开对统计方式和统计数据的类型不作特殊限定。
在一种实施方式中，颜色分布统计可以是彩色图像直方图统计，也可以是灰度图像直方图统计，例如，在进行灰度图像直方图数据统计时，首先需要定义显示数据灰度范围上的间隔数目，显示数据灰度范围通常为0～255，将间隔数目设置为16，则可以将显示数据的分为256/16＝16个组进行统计，表示从0开始，依次选取灰度范围为16的数据进行像素点统计，比如，第一组选取的灰度范围是[0，15]，第二组选取的灰度范围则是[16，31]，以此类推，共可以得到具有16个条状图的直方图统计数据；将统计结果体现在直方图中条状图的高度上，显示数据在某个灰度范围内的像素点分布数量与条状图的高度呈正相关。在进行彩色图像直方图数据统计时，可以基于显示数据提取R/G/B三个颜色通道的图像，再对三个通道的图像分别采用上述灰度图像直方图统计方法以获取每个通道图像的直方图。则上述第一统计数据可以是基于显示数据得到的每个颜色通道的直方图数据。
在第二处理器确定上述第一统计数据后，第一处理器需要获取第一统计数据。本公开对第一处理器获取第一统计数据的方式不作特殊限定，该第一处理器可以从寄存器内读取上述显示数据的第一统计数据，第一处理器可以发起首次通信，将读取命令和第二处理器的寄存器地址写入第二处理器，第二处理器将接收到的读取命令和寄存器地址分别进行提取，对读取命令解析完成后，根据接收到的寄存器地址将第一统计数据输出到缓存中，第一处理器将再次发起通信，对缓存中的第一统计数据进行读取。此外，还可以从易失性存储器中获取第一统计数据，例如，可以从随机存取存储器(Random Access Memory，RAM)中读取第一统计数据，首先可以确认存储第一统计数据的地址单元的地址码的有效性，其次，选中该存储第一统计数据的RAM为工作状态，最后，当第一处理器向RAM发出读取命令后即可获取第一统计数据。
在一种实施方式中，上述获取显示数据的第一统计数据，可以包括以下步骤：
从第二处理器120的寄存器内读取所述显示数据的第一统计数据。寄存器的拥有较高的数据读写速度和传送速度，因此，第一处理器从寄存器中读取第一统计数据在一定程度上可以提高读取效率，此外，将第一统计数据存储在寄存器中，无需占用RAM的存储空间，可以提高RAM的利用率。
在一种实施方式中，第二处理器120将第一统计数据输出至其内部的寄存器中，第一处理器从第二处理器120的寄存器内读取显示数据的第一统计数据，以进行颜色均值计算。
继续参考图3，在步骤S320中，根据第一统计数据进行颜色均值计算，得到显示数据的第二统计数据。
颜色均值计算可以是计算第一统计数据中相同颜色通道的颜色值的均值。上述第二统计数据是颜色均值计算的结果，例如，可以是R/G/B颜色通道的均值计算结果。
相应的，上述第一处理器根据所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据，可以包括以下步骤：
根据所述每个通道的直方图数据与所述显示数据中的像素数量，计算所述每个通道的像素均值。
在获取每个通道的第一统计数据后，可以根据下述公式(1)～(3)得到第二统计数据，其中，第一统计数据可以包括所述显示数据中的每个通道的直方图数据，第二统计数据可以包括所述显示数据中的所述每个通道的像素均值。
其中，Ravg，Ravg，Ravg分别为R/G/B三个通道的像素均值，R-Histj，G-Histj，B-Histj分别代表RGB三个通道的直方图数据，n表示显示数据中的像素数量；且R/G/B三个分量的值只能取0～255之间的值，因此可以对每个分量0～255的分布数量进行统计。
在一种实施方式中，参考图4所示，上述根据所述每个通道的直方图数据与所述显示数据中的像素数量，计算所述每个通道的像素均值可以包括以下步骤S410～S430。
步骤S410，利用显示屏的伽马值将像素值转换为显示量化值；
步骤S740，根据每个通道的直方图数据与显示数据中的像素数量，计算每个通道的显示量化值的均值；
步骤S430，利用伽马值将每个通道的显示量化值的均值转换为每个通道的像素均值。
在步骤S410中，可以利用显示屏的伽马值将像素值转换为显示量化值，其中，显示屏的伽马值可以是2.2，可以根据公式将R/G/B三个通道的像素值转换为显示量化值。像素值本质上是显示屏的电信号对应的数字信号值，电信号强度与显示屏所发出的光信号强度之间并不是线性的关系，因此可以将电信号(即像素值)通过非线性转换，得到用于表征光信号强度的显示量化值。通常可以采用幂函数的关系实现该非线性转换，伽马值可以是幂函数中的指数。在一种实施方式中，可以通过显示回读模块回读感光传感器上方区域显示的内容，例如，高通平台的同步回写(Cocurrent Writeback，CWB)模块和联发科平台的写入直接内存存取(Write Direct Memory Access，WDMA)模块，在获取到感光传感器上方区域显示的内容后，可直接基于显示数据通过下述公式(4)～(6)计算颜色均值：
其中，n是感光传感器上方区域的像素个数，Ri，Gi，Bi分别代表R/G/B三个通道的分量值。
在上述公式中，首先将R/G/B的分量值进行归一化，通过电光传输函数(Electro-Optical Transfer Function，EOFT)转换到线性空间；其次，求出R/G/B三个分量在线性空间下的平均值；最后通过光电传输函数(Opto-Electronic Transfer Function，OEFT)将R/G/B从线性空间转换到非线性空间，再乘以255。由于R/G/B三个分量的值只能取0～255之间的值，因此可以对每个分量0～255的分布数量先做好统计，然后直接求和。
由于直接基于显示数据进行颜色均值计算使得计算量增大，同时带来大数据量内存搬运，因此本公开对显示数据进行了直方图统计处理。
在步骤420中，可基于直方图数据与显示数据中的像素数量，根据公式
计算每个通道的显示量化值的均值，其中，R-Histj，G-Histj，B-Histj分别代表RGB三个通道的直方图数据，n表示显示数据中的像素数量。
最后，在步骤S430中，可根据下述公式(7)～(9)利用所述伽马值将所述每个通道的显示量化值的均值转换为所述每个通道的像素均值：
基于上述方法，采用直方图数据替代原始显示数据计算颜色均值，减少了数据运算量的同时降低了大量内存搬运和计算造成的功耗。
以50*50像素大小的ROI为例，假设每个像素为24位，则感兴趣区域的显示内容有50*50·24的像素位数(Bits Per Pixel，BPP)，应用原有的第二处理器对显示数据进行处理，需要进行3*50*50＝7500次运算，才能得到颜色均值的计算结果；而本公开在第二处理器中增加直方图统计步骤，对显示数据进行颜色分布统计，得到了第一统计数据，基于第一统计数据进行颜色均值计算，只需要做3*256＝768次运算，大大减少了数据的运算量，从而达到了节省功耗的目的。
图5示出了应用第二处理器120的显示数据处理方法的示例性流程，可以根据以下步骤S510～S530得到第一统计数据。
步骤S510，获取显示数据；该显示数据用于在显示屏上进行显示；
步骤S520，对显示数据进行颜色分布统计，得到上述显示数据的第一统计数据；
步骤S530，输出第一统计数据，使第一处理器获取该第一统计数据并对第一统计数据进行颜色均值计算，得到上述显示数据的第二统计数据。
在进行显示数据处理时，第二处理器对显示数据进行颜色分布统计，得到上述显示数据的第一统计数据。因此，第一处理器获取的是对显示数据进行颜色分布统计后得到的第一统计数据，而不再是原始的显示数据，改善了大量内存数据的搬运，节省了功耗；本方案将原始的显示数据替换为所述第一统计数据进行颜色均值计算，不仅减小了因计算量过大导致的功耗，还降低了对总线带宽的占用。
下面对图5中的步骤S510～S530进行详细说明。
在步骤S510中，获取显示数据。
上述显示数据可以是显示屏中的感兴趣区域所显示的内容。感兴趣区域(Regionof Interest，ROI)可以根据屏下光传感器的位置进行确定，在一种实施方式中，可以根据屏下光感传感器的位置获取ROI的坐标，再基于ROI的坐标对当前显示屏中的内容进行截取，以获得感兴趣区域所的显示内容。此外，ROI还可以通过手动选中部分显示内容进行确定，或基于注意力机制自动获取，本公开对ROI的确定方式不作特殊限定。
显示数据可以依据感兴趣区域所的显示内容得到的，将感兴趣区域所的显示内容输入多个应用，可以得到多个图像数据，因此，上述获取显示数据，可以包括以下步骤：
获取多个应用的图像数据，将所述多个应用的图像数据进行叠加，得到所述显示数据，进而对所述显示数据进行颜色分布统计。此外，如图6所示，所述显示数据还可以通过对叠加后的图像数据进行后处理得到，后处理可以包括对图像进行色彩变换等其他处理方式，本公开对后处理的方式不作特殊限定。
颜色分布统计可以采用直方图统计图像数据的R/G/B三个通道的像素数量，还可以对图像数据的颜色参量进行统计，例如，可以对图像数据的色调，色饱和度和亮度进行统计，以确定颜色的类别和深浅程度，本公开对此不作特殊限定。
在步骤S520中，对显示数据进行颜色分布统计，以得到第一统计数据。在一种实施方式中，如图7所示，第二处理器可以包括S730的显示处理器(Display Process Unit，DPU)，可以在该显示处理器内部预先配置一个统计模块，该统计模块可以对显示数据进行颜色分布统计，得到显示数据的第一统计数据。此外，第一统计数据可以通过对所述显示数据进行彩色图像的直方图统计所得，还可以包括颜色参量的统计特征，基于小波的分块图像颜色特征等其他颜色特征或融合特征，本公开对上述第一统计数据的数据类型不作特殊限定。根据图7所示，上述第一统计数据可以在S710的传感器服务(SensorService)，S720的硬件创作者(HWComposer)以及DPU之间进行数据交互与数据传输。
步骤S530中，输出第一统计数据，使第一处理器获取该第一统计数据并对第一统计数据进行颜色均值计算，得到显示数据的第二统计数据。可以将第一统计数据写入到第二处理器120的寄存器中，以供第一处理器110进行读取，首先可以设置寄存器自动存取时间段，例如将自动存取时间段设置为1秒，则表示每一秒向寄存器自动写入一次；然后，可以调用传送指令，将第一统计数据写入寄存器。
此外，还可以将所述第一统计数据输出至易失性存储器中，例如，可以将第一统计数据写入到RAM中，首先可以确认准备存储第一统计数据的RAM的地址单元的地址码的有效性，其次，选中该存储第一统计数据的RAM为工作状态，最后，当第二处理器向RAM发出写入命令后即可将第一统计数据写入RAM，本公开对第一统计数据的写入方式和存储器不作特殊限定。
由于寄存器拥有较高的数据读写速度和传送速度，因此将上述第一统计数据写入到寄存器中，在一定程度上可以提高读写效率；同时，将第一统计数据存储在寄存器中，无需占用RAM的存储空间，可以提高RAM的利用率。
基于上述方法，采用直方图统计得到的第一统计数据替代显示数据计算颜色均值，减少了数据运算量的同时降低了大量内存搬运和计算造成的功耗。
图8示出了显示数据处理方法的示例***互流程，包括：
步骤801，根据屏下光感传感器的位置确定感兴趣区域坐标；
步骤802，根据感兴趣区域的坐标对当前显示屏中的内容进行截取，以获取感兴趣区域所的显示内容；
步骤803，将感兴趣区域所的显示内容输入多个应用，可以得到多个图像数据；
步骤804，将所述多个应用的图像数据进行叠加，得到所述显示数据；
步骤805，对显示数据进行颜色分布统计，得到所述显示数据的每个通道的直方图数据；
步骤806，输出显示数据的每个通道的直方图数据至内部寄存器；
步骤807，从第二处理器的寄存器内读取每个通道的直方图数据；
步骤808，利用显示屏的伽马值将显示数据的像素值转换为显示量化值；
步骤809，根据所述每个通道的直方图数据与显示数据中的像素数量，计算所述每个通道的显示量化值的均值；
步骤810，利用伽马值将所述每个通道的显示量化值的均值转换为所述每个通道的像素均值。
根据显示数据得到的每个通道的直方图数据与显示数据相比，第二处理器在进行读取时，内存数据的搬运量降低，在进行均值计算时，计算量减小，从而节省了功耗损耗。
以上说明了如何得到第一统计数据，以及基于第一统计数据如何获取第二统计数据。基于第一统计数据和第二统计数据，还可以做进一步的处理，以实现相关的功能或控制。
在一种实施方式中，可结合第二统计数据，以及在纯黑环境下采集的不同亮度，不同灰阶下屏幕对感光传感器产生的噪声计算漏光量，进而计算出屏幕对感光传感器的影响量，以确定屏下感光传感器的光感补偿方案。
在一种实施方式中，还可以根据第一统计数据计算指定区域的亮度。首先，可根据下述公式计算单个像素的亮度：
Luma＝0.2126·R+0.7152·G+0.0722·B
其中R、G、B代表单个像素的三个颜色通道数据。
其次，结合上述公式，可根据下述公式计算指定区域的平均亮度：
其中，n为指定区域的像素个数。
最后，可根据下述公式，利用直方图数据简化上述公式：
根据第一统计数据计算指定区域的亮度，可以减小使用原始数据计算区域亮度的功耗，提高计算效率。在确定指定区域的亮度后，可以通过调整指定区域的亮度改善显示屏背景颜色对导航栏颜色的干扰，从而在一定程度上解决显示屏背景颜色与导航栏颜色相近时，导航栏难以识别的问题。
本公开的示例性实施方式还提供一种显示数据处理装置，应用于电子设备100的第一处理器110。参考图9所示，该显示数据处理装置900可以包括：
数据获取模块910，被配置为获取显示数据的第一统计数据；显示数据用于在显示屏上进行显示，第一统计数据是由第二处理器对显示数据进行颜色分布统计所得到；
数据计算模块920，被配置为根据第一统计数据进行颜色均值计算，得到显示数据的第二统计数据。
在一种实施方式中，第一统计数据包括显示数据中的每个通道的直方图数据；第二统计数据包括显示数据中的所述每个通道的像素均值；上述根据第一统计数据进行颜色均值计算，得到显示数据的第二统计数据，可以包括：
根据每个通道的直方图数据与显示数据中的像素数量，计算每个通道的像素均值。
在一种实施方式中，上述根据每个通道的直方图数据与显示数据中的像素数量，计算所述每个通道的像素均值，可以包括：
利用显示屏的伽马值将像素值转换为显示量化值；
根据每个通道的直方图数据与所述显示数据中的像素数量，计算每个通道的显示量化值的均值；
利用伽马值将所述每个通道的显示量化值的均值转换为每个通道的像素均值。
在一种实施方式中，上述获取显示数据的第一统计数据，可以包括：
从第二处理器的寄存器内读取显示数据的第一统计数据。
本公开的示例性实施方式还提供另一种显示数据处理装置，应用于电子设备100的第二处理器120。参考图10所示，该电子设备的数据处理装置1000可以包括：
数据获取模块1010，被配置为获取显示数据；显示数据用于在显示屏上进行显示；
数据计算模块1020，被配置为对显示数据进行颜色分布统计，得到显示数据的第一统计数据；
数据输出模块1030，被配置为输出第一统计数据，使第一处理器获取第一统计数据并对所述第一统计数据进行颜色均值计算，得到显示数据的第二统计数据。
在一种实施方式中，上述获取显示数据，可以包括：
获取多个应用的图像数据，将多个应用的图像数据进行叠加，得到显示数据。
此外，上述装置中各部分的具体细节在方法部分实施方式中已经详细说明，未披露的细节内容可以参见方法部分的实施方式内容，因而不再赘述。
本公开的示例性实施方式还提供了一种计算机可读存储介质，可以实现为一种程序产品的形式，其包括程序代码，当该程序产品在电子设备上运行时，程序代码用于使电子设备执行(更具体地说，是使电子设备的处理器执行)本说明书上述“示例性方法”部分中描述的各种示例性实施方式的步骤。
在一种实施方式中，该程序产品可以实现为便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在电子设备，例如个人电脑上运行。然而，本公开的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行***、装置或者器件使用或者与其结合使用。
程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质包括但不限于电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、CD-ROM、光存储器件、磁存储器件、或者上述的任意合适的组合。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码，程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的示例性实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
所属技术领域的技术人员能够理解，本公开的各个方面可以实现为***、方法或程序产品。因此，本公开的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“***”。本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施方式。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施方式仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限定。
Claims (10)
1.一种显示数据处理方法，其特征在于，应用于第一处理器，所述方法包括：
获取显示数据的第一统计数据；所述显示数据用于在显示屏上进行显示，所述第一统计数据是由第二处理器对所述显示数据进行颜色分布统计所得到；所述显示数据为所述显示屏中的感兴趣区域所显示的内容；所述感兴趣区域根据屏下光传感器的位置确定，通过手动选中部分显示内容确定，或者基于注意力机制获取；
根据所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据；
所述第一统计数据包括所述显示数据的像素点统计数据，或者所述显示数据的颜色参量统计数据；所述像素点统计数据包括不同颜色数值区域内的像素点的数量，所述颜色参量统计数据包括所述显示数据的色调、色饱和度、亮度的统计数据。
2.根据权利要求1所述的方法，其特征在于，所述第一统计数据包括所述显示数据中的每个通道的直方图数据；所述第二统计数据包括所述显示数据中的所述每个通道的像素均值；所述根据所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据，包括：
根据所述每个通道的直方图数据与所述显示数据中的像素数量，计算所述每个通道的像素均值。
3.根据权利要求2所述的方法，其特征在于，所述根据所述每个通道的直方图数据与所述显示数据中的像素数量，计算所述每个通道的像素均值，包括：
利用所述显示屏的伽马值将像素值转换为显示量化值；
根据所述每个通道的直方图数据与所述显示数据中的像素数量，计算所述每个通道的显示量化值的均值；
利用所述伽马值将所述每个通道的显示量化值的均值转换为所述每个通道的像素均值。
4.根据权利要求1所述的方法，其特征在于，所述获取显示数据的第一统计数据，包括：
从所述第二处理器的寄存器内读取所述显示数据的第一统计数据。
5.一种显示数据处理方法，其特征在于，应用于第二处理器，所述方法包括：
获取显示数据；所述显示数据用于在显示屏上进行显示；所述显示数据为所述显示屏中的感兴趣区域所显示的内容；所述感兴趣区域根据屏下光传感器的位置确定，通过手动选中部分显示内容确定，或者基于注意力机制获取；
对所述显示数据进行颜色分布统计，得到所述显示数据的第一统计数据；
输出所述第一统计数据，使第一处理器获取所述第一统计数据并对所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据；
所述第一统计数据包括所述显示数据的像素点统计数据，或者所述显示数据的颜色参量统计数据；所述像素点统计数据包括不同颜色数值区域内的像素点的数量，所述颜色参量统计数据包括所述显示数据的色调、色饱和度、亮度的统计数据。
6.根据权利要求5所述的方法，其特征在于，所述获取显示数据，包括：
获取多个应用的图像数据，将所述多个应用的图像数据进行叠加，得到所述显示数据。
7.一种显示数据处理装置，其特征在于，应用于第一处理器，所述装置包括：
数据获取模块，被配置为获取显示数据的第一统计数据；所述显示数据用于在显示屏上进行显示，所述第一统计数据是由第二处理器对所述显示数据进行颜色分布统计所得到；所述显示数据为所述显示屏中的感兴趣区域所显示的内容；所述感兴趣区域根据屏下光传感器的位置确定，通过手动选中部分显示内容确定，或者基于注意力机制获取；
数据计算模块，被配置为根据所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据；所述第一统计数据包括所述显示数据的像素点统计数据，或者所述显示数据的颜色参量统计数据；所述像素点统计数据包括不同颜色数值区域内的像素点的数量，所述颜色参量统计数据包括所述显示数据的色调、色饱和度、亮度的统计数据。
8.一种显示数据处理装置，其特征在于，应用于第二处理器，所述装置包括：
数据获取模块，被配置为获取显示数据；所述显示数据用于在显示屏上进行显示；所述显示数据为所述显示屏中的感兴趣区域所显示的内容；所述感兴趣区域根据屏下光传感器的位置确定，通过手动选中部分显示内容确定，或者基于注意力机制获取；
数据计算模块，被配置为对所述显示数据进行颜色分布统计，得到所述显示数据的第一统计数据；
数据输出模块，被配置为输出所述第一统计数据，使第一处理器获取所述第一统计数据并对所述第一统计数据进行颜色均值计算，得到所述显示数据的第二统计数据；所述第一统计数据包括所述显示数据的像素点统计数据，或者所述显示数据的颜色参量统计数据；所述像素点统计数据包括不同颜色数值区域内的像素点的数量，所述颜色参量统计数据包括所述显示数据的色调、色饱和度、亮度的统计数据。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6任一项所述的方法。
10.一种电子设备，其特征在于，包括：
第一处理器；
第二处理器；
显示屏；
存储器，用于存储可执行指令；
其中，所述第一处理器配置为经由执行所述可执行指令来执行权利要求1至4任一项所述的方法，或者所述第二处理器配置为经由执行所述可执行指令来执行权利要求5或6所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210356533.8A CN114675922B (zh) | 2022-04-06 | 2022-04-06 | 显示数据处理方法、装置、存储介质与电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210356533.8A CN114675922B (zh) | 2022-04-06 | 2022-04-06 | 显示数据处理方法、装置、存储介质与电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114675922A CN114675922A (zh) | 2022-06-28 |
| CN114675922B true CN114675922B (zh) | 2024-06-21 |
Family
ID=82078540
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210356533.8A Active CN114675922B (zh) | 2022-04-06 | 2022-04-06 | 显示数据处理方法、装置、存储介质与电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114675922B (zh) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102129674A (zh) * | 2010-12-17 | 2011-07-20 | 北京优纳科技有限公司 | 一种自适应彩色图像颜色平衡校正方法 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11150921B2 (en) * | 2015-09-01 | 2021-10-19 | International Business Machines Corporation | Data visualizations selection |
| US10186232B2 (en) * | 2016-08-01 | 2019-01-22 | Qualcomm Incorporated | Nonlinear signal scaling for display device power saving |
| CN109587347A (zh) * | 2019-01-28 | 2019-04-05 | 珠海格力电器股份有限公司 | 显示屏参数的调整方法、装置和***，移动终端 |
-
2022
- 2022-04-06 CN CN202210356533.8A patent/CN114675922B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102129674A (zh) * | 2010-12-17 | 2011-07-20 | 北京优纳科技有限公司 | 一种自适应彩色图像颜色平衡校正方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114675922A (zh) | 2022-06-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20210289117A1 (en) | Imaging Control Method and Apparatus, Electronic Device, and Computer Readable Storage Medium | |
| US9826149B2 (en) | Machine learning of real-time image capture parameters | |
| US10783837B2 (en) | Driving method and driving device of display device, and related device | |
| US20170018059A1 (en) | Global Approximation to Spatially Varying Tone Mapping Operators | |
| CN109727216B (zh) | 图像处理方法、装置、终端设备及存储介质 | |
| CN113962859B (zh) | 一种全景图生成方法、装置、设备及介质 | |
| US20220261961A1 (en) | Method and device, electronic equipment, and storage medium | |
| CN113742025B (zh) | 页面生成方法、装置、设备和存储介质 | |
| CN113096035A (zh) | 高动态范围图像生成方法、装置、智能终端及存储介质 | |
| CN110855957A (zh) | 图像处理方法及装置、存储介质和电子设备 | |
| US20140092116A1 (en) | Wide dynamic range display | |
| CN113132695A (zh) | 镜头阴影校正方法、装置及电子设备 | |
| CN112822413B (zh) | 拍摄预览方法、装置、终端和计算机可读存储介质 | |
| US20210358087A1 (en) | A method and device for enhancing video image quality | |
| CN114675922B (zh) | 显示数据处理方法、装置、存储介质与电子设备 | |
| CN110310341B (zh) | 颜色算法中默认参数的生成方法、装置、设备和存储介质 | |
| CN109672829B (zh) | 图像亮度的调整方法、装置、存储介质及终端 | |
| CN110097520B (zh) | 图像处理方法和装置 | |
| CN113038055B (zh) | 图像处理方法、装置及电子设备 | |
| CN115471435A (zh) | 图像融合方法及装置、计算机可读介质和电子设备 | |
| CN113409199A (zh) | 图像处理方法、装置、电子设备及计算机可读介质 | |
| CN111784607A (zh) | 图像色调映射方法、装置、终端设备及存储介质 | |
| CN113014745A (zh) | 视频图像降噪方法及装置、存储介质及电子设备 | |
| CN112488933A (zh) | 一种视频的细节增强方法、装置、移动终端和存储介质 | |
| CN110599437A (zh) | 用于处理视频的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |