CN116795306A - 图像显示方法和电子设备 - Google Patents

图像显示方法和电子设备 Download PDF

Info

Publication number
CN116795306A
CN116795306A CN202210244515.0A CN202210244515A CN116795306A CN 116795306 A CN116795306 A CN 116795306A CN 202210244515 A CN202210244515 A CN 202210244515A CN 116795306 A CN116795306 A CN 116795306A
Authority
CN
China
Prior art keywords
display
display area
image
area
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210244515.0A
Other languages
English (en)
Inventor
鲁颖
姜顺吉
谭文靖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202210244515.0A priority Critical patent/CN116795306A/zh
Publication of CN116795306A publication Critical patent/CN116795306A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Controls And Circuits For Display Device (AREA)

Abstract

本申请实施例提供了一种图像显示方法和电子设备。该方法应用于电子设备,该电子设备包括多个显示区,多个显示区中的至少两个显示区的显示规格不同,该方法包括:获取第一原始视频帧;根据第一信息从多个显示区中确定目标显示区;根据目标显示区的显示规格对第一原始视频帧进行处理,得到第一图像,其中第一图像的分辨率与目标显示区的显示规格相匹配;通过目标显示区显示第一图像。上述技术方案中,电子设备在显示图像之前会根据目标显示区的显示规格对原始视频帧进行处理,使得最终显示出来的图像与目标显示区的大小相匹配,避免产生黑边问题以及画面严重缺失问题,从而提升用户体验。

Description

图像显示方法和电子设备
技术领域
本申请实施例涉及电子设备技术领域,并且更具体地,涉及一种图像显示方法和电子设备。
背景技术
经过多年的设备迭代,折叠屏设备已经逐渐被用户所接受。在用户的操作下,折叠屏设备至少具有两种状态:折叠状态和展开状态。在这两种状态下,屏幕提供的显示面积不同,例如折叠状态的显示面积为展开状态的显示面积的一半。
目前开发者开发的应用安装于折叠屏设备时,显示画面(例如视频通话过程中的画面)只能完整适配一种状态,当折叠屏设备切换为另一种状态时,则会出现黑边或画面丢失的问题,严重影响用户体验。
发明内容
本申请实施例提供一种图像显示方法和电子设备,能够避免电子设备在显示图像过程中出现黑边和画面丢失的问题,从而提升用户体验。
第一方面,提供了一种图像显示方法,应用于电子设备,所述电子设备包括多个显示区,所述多个显示区中的至少两个显示区的显示规格不同,所述方法包括:获取第一原始视频帧;根据第一信息从所述多个显示区中确定目标显示区;根据所述目标显示区的显示规格对所述第一原始视频帧进行处理,得到第一图像,其中所述第一图像的分辨率与所述目标显示区的显示规格相匹配;通过所述目标显示区显示所述第一图像。
本申请提供的技术方案中,在显示第一原始视频帧的内容之前,电子设备可以根据目标显示区的显示规格对第一原始视频帧进行处理,得到分辨率与目标显示区的显示规格相匹配的第一图像。这样目标显示区在显示第一图像时,第一图像能够完整匹配目标显示区的大小,从而具有较好的显示效果,避免了黑边问题以及画面严重缺失问题的产生,从而提升了用户体验。
结合第一方面,在一种可能的实现方式中,所述显示规格包括分辨率和/或宽高比。
可选地,分辨率可以表示为像素宽×像素高。
结合第一方面,在一种可能的实现方式中,所述电子设备包括可折叠显示屏,所述多个显示区中的至少部分显示区位于所述可折叠显示屏,所述第一信息包括:所述可折叠显示屏的展折状态;和/或所述至少部分显示区中互不重叠的显示区之间的空间位置关系。
本申请实施例可应用于折叠屏设备,不论使用电子设备的哪个显示区显示图像,显示区都能够得到最大化的利用,这样可以充分利用大屏优势,显示更多内容,提升用户观感。
结合第一方面,在一种可能的实现方式中,在所述根据第一信息从所述多个显示区中确定目标显示区之后,所述方法还包括:获取所述目标显示区的显示规格。
结合第一方面,在一种可能的实现方式中,所述目标显示区的显示规格为预先存储的;或者,所述目标显示区的显示规格是根据所述电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。
结合第一方面,在一种可能的实现方式中,所述根据所述目标显示区的显示规格对所述第一原始视频帧进行处理,得到第一图像,包括:根据所述目标显示区的显示规格,确定待显示区域,其中所述待显示区域的显示规格大于或等于所述目标显示区的显示规格;根据所述待显示区域的显示规格对所述第一原始视频帧进行裁剪,得到所述第一图像,所述第一图像为所述待显示区域内的图像。
本申请实施例中,待显示区域的显示规格等于目标显示区的显示规格,可以包括:
待显示区的分辨率等于目标显示区的分辨率;或,待显示区的宽高比等于目标显示区的宽高比。
本申请实施例中,待显示区域的显示规格大于目标显示区的显示规格,可以包括:
待显示区域的分辨率大于目标显示区的分辨率,例如待显示区域的像素宽比目标显示区的像素宽多第三预设数值,待显示区域的像素高比目标显示区的像素高多第四预设数值;或,待显示区域的像素宽与目标显示区的像素宽的比值大于1(例如大于1但小于1.3),待显示区域的像素高与目标显示区的像素高的比值大于1(例如大于1但小于1.3)。
待显示区域的显示规格大于目标显示区的显示规格时,可以使第一图像在目标显示区的边缘区域也具有完整的显示,改善用户观感,提升用户体验。
结合第一方面,在一种可能的实现方式中,所述根据所述待显示区域的显示规格对所述第一原始视频帧进行裁剪,包括:以所述第一原始视频帧的焦点为中心,将所述第一原始视频帧的位于所述待显示区域之外的区域的图像裁剪掉,得到位于所述待显示区域的图像。
通过上述处理方式,可以保证在对第一原始视频帧进行裁剪时,保留住视频帧中的主要画面,从而在显示区中显示时不影响用户观感体验。
结合第一方面,在一种可能的实现方式中,所述第一原始视频帧是由所述电子设备的摄像头获取的;或者,所述第一原始视频帧是由与所述电子设备交互的另一电子设备的摄像头获取的。
结合第一方面,在一种可能的实现方式中,所述方法还包括:获取第二原始视频帧;当满足第一预设条件时,根据所述目标显示区的显示规格对所述第二原始视频帧进行处理,得到第二图像,其中所述第二图像的分辨率与所述目标显示区的显示规格相匹配;通过所述目标显示区显示所述第二图像;其中,所述第一预设条件包括以下至少一项:所述电子设备包括可折叠显示屏,且所述可折叠显示屏的展折状态未发生改变;所述电子设备包括至少两个显示屏,且所述至少两个显示屏的显示状态未发生切换。
这里的目标显示区可以为用于显示第二原始视频帧的前一视频帧所用的显示区。也就是说,当用于显示第二原始视频帧的目标显示区与用于显示第二原始视频帧的前一视频帧的目标显示区相同时,可以直接使用之前的目标显示区的显示规格,而无需重新获取,可以节省计算资源。
结合第一方面,在一种可能的实现方式中,所述方法还包括:当满足第二预设条件时,更新所述目标显示区;其中,所述第二预设条件包括以下至少一项:所述电子设备包括可折叠显示屏,且所述可折叠显示屏的展折状态发生改变;所述电子设备包括至少两个显示屏,且所述至少两个显示屏的显示状态发生切换。
目标显示区的显示规格在获取后可以作为单独的参数存储起来,若目标显示区不变,则在处理原始视频帧时可以直接读取,若目标显示区变化,则可以更新所存储的显示规格。这样可以减少运算过程,节约计算资源和电子设备能耗。
第二方面,提供了一种图像显示方法,应用于电子设备,所述电子设备包括第一显示区和第二显示区,所述第一显示区的显示规格与所述第二显示区的显示规格不同,所述方法包括:通过所述第一显示区显示第一图像,所述第一图像是根据所述第一显示区的显示规格对第一原始视频帧进行处理得到的,所述第一图像的分辨率与所述第一显示区的显示规格相匹配;当所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区时,通过所述第二显示区显示第二图像,所述第二图像是根据所述第二显示区的显示规格对第二原始视频帧进行处理得到的,所述第二图像的分辨率与所述第二显示区的显示规格相匹配。
本申请提供的技术方案中,电子设备可以根据目标显示区的显示规格对要显示的图像进行处理,使得屏幕最终显示出来的图像与目标显示区的大小相匹配,避免产生黑边问题以及画面严重缺失问题,从而提升用户体验。
结合第二方面,在一种可能的实现方式中,所述显示规格包括分辨率和/或宽高比。
结合第二方面,在一种可能的实现方式中,所述电子设备包括可折叠显示屏,所述第一显示区和所述第二显示区位于所述可折叠显示屏。
第一显示区与第二显示区的显示面积可以有重叠,也可以无重叠。
结合第二方面,在一种可能的实现方式中,所述可折叠显示屏为外折型,在所述通过所述第二显示区显示第二图像之前,所述方法还包括:检测到所述可折叠显示屏由展开态切换为折叠态;确定所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区,其中所述第一显示区为所述可折叠显示屏处于展开态时的实际显示区域,所述第二显示区为所述可折叠显示屏处于折叠态时的实际显示区域;或者,检测到所述可折叠显示屏由折叠态切换为展开态;确定所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区,其中所述第一显示区为所述可折叠显示屏处于折叠态时的实际显示区域,所述第二显示区为所述可折叠显示屏处于展开态时的实际显示区域。
本申请提供的方法可以应用于折叠屏设备,不论使用电子设备的哪个显示区显示图像,显示区都能够得到最大化的利用,这样可以充分利用大屏优势,显示更多内容,提升用户观感。
结合第二方面,在一种可能的实现方式中,所述电子设备包括第一显示屏和第二显示屏,所述第一显示区位于所述第一显示屏,所述第二显示区位于所述第二显示屏。
结合第二方面,在一种可能的实现方式中,在所述通过所述第二显示区显示第二图像之前,所述方法还包括:检测到屏幕切换信息,所述屏幕切换信息用于指示所述电子设备上显示图像的显示屏由所述第一显示屏切换为所述第二显示屏;确定所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区,其中所述第一显示区为所述第一显示屏的实际显示区域,所述第二显示区为所述第二显示屏的实际显示区域。
本申请提供的方法可以应用于多屏设备,不论使用电子设备的哪个显示屏显示图像,显示屏都能够得到最大化的利用,这样可以充分利用大屏优势,显示更多内容,提升用户观感。
结合第二方面,在一种可能的实现方式中,所述第一显示区的显示规格和/或所述第二显示区的显示规格为预先存储的,或者是根据所述电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。
结合第二方面,在一种可能的实现方式中,在所述通过所述第二显示区显示第二图像之前,所述方法还包括:根据所述第二显示区的显示规格,确定待显示区域,其中所述待显示区域的显示规格大于或等于所述第二显示区的显示规格;根据所述待显示区域的显示规格对所述第二原始视频帧进行裁剪,得到所述第二图像,所述第二图像为所述待显示区域内的图像。
待显示区域的显示规格大于第二显示区的显示规格时,可以使第二图像在第二显示区的边缘区域也具有完整的显示,改善用户观感,提升用户体验。
结合第二方面,在一种可能的实现方式中,所述第一原始视频帧与所述第二原始视频帧属于同一视频流,且所述第二原始视频是位于所述第一原始视频帧之后的帧。
第三方面,提供了一种装置,该装置包含在电子设备中,该装置具有实现上述第一方面以及第一方面的任一种可能实现方式中所涉及的行为的功能,或者具有实现上述第二方面以及第二方面的任一种可能实现方式中所涉及的行为的功能。该功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块或单元。例如,获取模块或单元、确定模块或单元、显示模块或单元、检测模块或单元、处理模块或单元等。
第四方面,提供了一种电子设备,包括:多个显示区,多个显示区中的至少两个显示区的显示规格不同;一个或多个处理器;一个或多个存储器;所述一个或多个存储器存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行上述第一方面以及第一方面的任一种可能实现方式中的方法,或者执行上述第二方面以及第二方面的任一种可能实现方式中的方法。
第五方面,提供了一种电子设备,包括一个或多个处理器和一个或多个存储器。该一个或多个存储器与一个或多个处理器耦合,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,使得电子设备执行上述第一方面以及第一方面的任一种可能实现方式中的方法,或者执行上述第二方面以及第二方面的任一种可能实现方式中的方法。
其中第三方面至第五方面所述装置、电子设备的有益效果可以参考第一方面与第二方面中所描述的方法的有益效果,在此不再赘述。
第六方面,提供了一种计算机可读存储介质,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行上述第一方面以及第一方面的任一种可能实现方式中的方法,或者执行上述第二方面以及第二方面的任一种可能实现方式中的方法。
第七方面,提供一种包含指令的计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述第一方面以及第一方面的任一种可能实现方式中的方法,或者执行上述第二方面以及第二方面的任一种可能实现方式中的方法。
第八方面,提供一种芯片,所述芯片包括处理器与数据接口,所述处理器通过所述数据接口读取存储器上存储的指令,执行上述第一方面以及第一方面的任一种可能实现方式中的方法,或者执行上述第二方面以及第二方面的任一种可能实现方式中的方法。
可选地,作为一种实现方式,所述芯片还可以包括存储器,所述存储器中存储有指令,所述处理器用于执行所述存储器上存储的指令,当所述指令被执行时,所述处理器用于执行上述第一方面以及第一方面的任一种可能实现方式中的方法,或者执行上述第二方面以及第二方面的任一种可能实现方式中的方法。
上述芯片具体可以是现场可编程门阵列或者专用集成电路。
附图说明
图1是本申请实施例提供的一种电子设备的硬件结构示意图。
图2是本申请实施例提供的一种电子设备的软件结构示意图。
图3是适用于本申请的一种应用场景示意图。
图4是现有的折叠屏设备在不同形态下的图像显示效果示意图。
图5是本申请实施例提供的一种图像显示方法的示意性流程图。
图6-9是本申请实施例提供的图像显示方法中显示区的划分方式的示意图。
图10是本申请实施例提供的图像显示方法中图像处理方式的示意图。
图11是本申请实施例提供的一种图像显示方法的示意性流程图。
图12是本申请实施例提供的图像显示方法应用时的用户界面示意图。
图13是本申请实施例提供的一种电子设备的示意性结构图。
图14是本申请实施例提供的一种图像显示方法的示意性流程图。
图15是本申请实施例提供的一种图像显示装置的示意性结构框图。
具体实施方式
下面将结合附图,对本申请实施例中的技术方案进行描述。
需要说明的是,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“多个”是指两个或多于两个,“至少一个”和“一个或多个”是指一个、两个或两个以上。单数表达形式“一个”“一种”“所述”“上述”“该”和“这一”旨在也包括例如“一个或多个”这种表达形式,除非其上下文中明确地有相反指示。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
在本说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
本申请实施例提供了一种图像显示方法,可以应用于电子设备,也可是单独的应用程序,该应用程序可以实现本申请中的图像显示方法。具体地,在本申请实施例中,电子设备在显示图像之前,可以根据目标显示区的显示规格对原始视频帧进行处理,得到与目标显示区的显示规格相匹配的图像,再通过目标显示区显示该图像。这样电子设备最终显示出来的图像与目标显示区的大小相匹配,可以避免产生黑边问题以及画面丢失问题,从而提升用户体验。
本申请实施例提供的图像显示方法可以应用于手机(如直板屏幕手机、曲面屏手机、折叠屏手机等)、平板电脑、车载设备、可穿戴设备(如智能手表、智能手环、智能眼镜、智能首饰等)、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)以及其他具有显示功能的电子设备上。本申请实施例对电子设备的具体类型不作任何限制。
示例性的,图1示出了本申请实施例提供的一种电子设备的硬件结构示意图。
如图1所示,电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了***的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
例如,处理器110与触摸传感器180K可以通过I2C总线接口通信,实现电子设备100的触摸功能。处理器110和摄像头193可以通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194可以通过DSI接口通信,实现电子设备100的显示功能。
可以理解的是,上述示例中描述的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。电源管理模块141用于连接电池142。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态等参数。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星***(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
在本申请的一些实施例中,当显示面板采用OLED、AMOLED、FLED等材料时,上述显示屏194可以被弯折。这里,显示屏194可以被弯折是指显示屏可以在任意部位沿任意轴线被弯折到任意角度,并可以在该角度保持。例如,显示屏194可以从中部左右对折,也可以从中部上下对折,还可以沿平行的轴线多次折叠。
本申请中,将可以被弯折的显示屏称为可折叠显示屏。其中,该可折叠显示屏可以是一块屏幕,也可以是多块屏幕拼凑在一起组合成的显示屏,在此不作限定。对于配置有可折叠显示屏的电子设备而言,电子设备上的可折叠显示屏可以随时在折叠形态下的小屏和展开形态下大屏之间切换。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。ISP用于处理摄像头193反馈的数据。摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(chargecoupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储一个或多个计算机程序,该一个或多个计算机程序包括指令。处理器110可以通过运行存储在内部存储器121的上述指令,从而使得电子设备100执行本申请一些实施例中所提供的控制在显示屏194上显示图像的方法,以及各种功能应用以及数据处理等。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作***;该存储程序区还可以存储一个或多个应用程序(比如图库、联系人等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如图像,联系人等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。在一些实施例中,处理器110可以通过运行存储在内部存储器121的指令,和/或存储在设置于处理器110中的存储器的指令,使得电子设备执行本申请实施例中所提供的图像显示方法。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音频播放,录音等。
传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M,角度传感器180N等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
例如,在本申请的一些实施例中,压力传感器180A可以设置于显示屏194,并且可以根据检测到的用户的手触摸显示屏194的检测信号确定用户的触摸位置、以及触摸过程中手指与显示屏194的接触面积,根据用户的触摸位置和手指接触面积确定用户的握姿或手形,从而确定处于折叠形态的显示屏面向用户的区域,从而点亮面对用户的显示屏区域。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可用于导航,体感游戏场景。
应理解,当电子设备100静止时,陀螺仪传感器180B可以检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
陀螺仪传感器还可以测量电子设备运动过程中的因为重力引起的加速度,通过陀螺仪传感器测量重力加速度,可以计算出电子设备相对于水平面的倾斜角度。对于不同的倾斜角度,电子设备的重力加速度不同。因此,电子设备可以通过动态获取陀螺仪传感器的加速度数值,分析加速度的变化,从而确定电子设备倾斜角度的变化过程,进一步确定电子设备移动的方式。
示例性的,在本申请的一些实施例中,处于折叠形态的电子设备可能发生翻转,从而显示屏的不同显示区域与用户的位置关系可能发生变化。陀螺仪传感器可以用于监测电子设备100的翻转过程。电子设备100从水平状态进行翻转,陀螺仪传感器可以监测电子设备100围绕三个轴(即,x,y和z轴)的角速度,从而确定电子设备的翻转过程,从而确定翻转后的电子设备100的显示屏的不同显示区域与用户的位置关系,从而点亮面对用户的显示屏区域。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。
示例性的,在本申请的一些实施例中,折叠形态的电子设备可能移动或者翻转,从而显示屏的不同显示区域与用户的位置关系可能发生变化。加速度传感器180E可以用于监测电子设备100围绕三个轴(即,x,y和z轴)的加速度变化情况。此外,可以结合加速度和陀螺仪传感器的监测,例如加速度传感器180E获取加速度变化情况,以及陀螺仪传感器确定电子设备100倾斜角度的变化过程,确定电子设备的移动方式或者翻转过程,从而确定翻转后的电子设备100的显示屏的不同显示区域与用户的位置关系,以点亮面对用户的显示屏区域。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸显示屏。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
应理解,在本申请实施例的描述中,将显示屏194和触摸传感器180K作为一个整体,称为“触摸显示屏”,换言之,本申请中的触摸显示屏不但可以沿任意轴线进行折叠,还可以接收用户的触摸操作,例如点击、双击、滑动等操作,并将操作信息传递到处理器110,由处理器110确定操作类型以及操作结果,并执行相应的操作结果。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
在本申请中,该电子设备100为具有可折叠显示屏的电子设备时,还可以包括角度传感器180N。该角度传感器180N可以设置在该电子设备100的可折叠显示屏的弯折部位处。电子设备100可以通过角度传感器180N,测量该可折叠显示屏在折叠过程中,中间弯折部位两端所成夹角。根据电子设备100的弯折部位的两端所成的夹角可以判断电子设备100的物理形态,例如折叠形态或者展开形态等。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
以上介绍了电子设备100可能的硬件结构示意图。电子设备100的软件***可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的***为例,示例性说明电子设备100的软件结构。
图2是本申请实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android***分为四层,从上至下分别为应用程序层,应用程序框架层,***运行库层(包括***库和安卓运行时(Android runtime))以及内核层。
应用程序层可以包括一系列应用程序包。如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。应用程序主要是用户界面(user interface,UI)方面的,通常使用JAVA语言调用应用程序框架层的接口编写。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图***,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图***包括可视控件,例如显示文字的控件,显示图片的控件等。视图***可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在***顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
***运行库层(libraries)可以分成两部分,分别是***库和Android运行时。
安卓运行时(Android runtime)即Android运行环境,包括核心库和虚拟机。Android runtime负责安卓***的调度和管理。核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
***库是应用程序框架的支撑,可包括多个功能模块,例如:表面管理器(surfacemanager),媒体库(media libraries),三维图形处理库(如面向嵌入式***的开放式图形库(open graphics library for embedded systems,OpenGL ES)),2D图形引擎(如:Skia数据库(skia graphics library,SGL))等。
表面管理器用于对显示子***进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层,用于提供操作***的本质功能例如文件管理、内存管理、进程管理、网络协议栈等。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动、蓝牙驱动等。
为方便理解,本申请以下实施例将以具有图1和图2所示结构的电子设备为例,结合附图和应用场景,对本申请实施例提供的图像显示方法进行具体阐述。
图3示出了适用于本申请的一种应用场景示意图。如图3所示,该场景中包括电子100和使用电子设备的用户200。
电子设备100搭载有操作***,操作***内置有***级应用程序(application,APP),用户也可以根据自己的需要安装或卸载用户级APP。电子设备100可以具有如图1所示的硬件结构和/或如图2所示的软件架构。
本申请实施例中,电子设备100可以是折叠屏设备,即电子设备100具有可折叠显示屏。电子设备100也可以是双屏设备,即电子设备100包括两个独立的显示屏。电子设备100也可以是包括至少三个显示屏的设备,本申请实施例对此不作限定。可以理解的是,当电子设备100包括多个显示屏时,若其中一个显示屏为可折叠显示屏,则该电子设备100也可以称为折叠屏设备。
用户200可以通过手势、语音等方式与电子设备100进行交互,例如打开电子设备100上的应用程序,或打开应用程序中的一个功能模块如小程序、快应用等。
用户200对电子设备100的一些操作可以使电子设备100的显示状态发生切换。以电子设备100包括可折叠显示屏为例,当用户200将电子设备100展开时,可折叠显示屏的整块区域可以用于显示内容;当用户200将电子设备折叠时,可折叠显示屏的部分区域(如面向用户200的区域)用于显示内容,而另一部分区域(如背向用户200的区域)被熄灭。若该电子设备100还包括直板显示屏,则当用户200将电子设备100折叠时,电子设备100的显示状态还可以由可折叠显示屏显示图像切换为直板显示屏显示图像。
换句话说,响应于用户200的操作,电子设备100上用于显示图像的区域可以在同一个显示屏内的不同区域间切换,也可以在不同的显示屏之间切换。
经过多年的设备迭代,折叠屏设备已经逐渐被用户所接受。在用户的操作下,折叠屏设备至少具有两种状态:折叠状态和展开状态。在这两种状态下,屏幕提供的显示面积不同,例如折叠状态的显示面积为展开状态的显示面积的一半。
由于折叠屏设备占据的市场较小,目前开发者开发的应用仍然只进行具有固定显示面积的直板屏设备的适配。例如对于同一应用会开发手机版和高清(high definition,HD)版,手机版应用适合常规屏幕尺寸(例如5.5英寸及以下或6英寸等适合用户单手握持的尺寸)的直板屏手机,HD版应用更适合大屏尺寸(例如7英寸至10英寸)的平板电脑。
当将手机版应用或HD版应用安装于折叠屏设备时,显示画面(例如视频帧)只能完整适配一种状态,当折叠屏设备切换为另一种状态时,则会出现黑边或画面丢失的问题,严重影响用户体验。下面结合图4举例说明。
图4中的(a)和(b)中电子设备安装手机版应用。如图4中的(a)所示,电子设备处于折叠状态,可以看出,手机版应用能够完整适配折叠态,即电子设备处于折叠态时具有较好的显示效果。当将电子设备展开时,如图4中的(b)所示,由于屏幕提供的显示面积变大,图像的像素高宽比与屏幕显示区域的大小不匹配,会在两侧形成黑边,也无法充分利用大屏优势去显示更多内容。
图4中的(c)和(d)中电子设备安装HD版应用。如图4中的(c)所示,电子设备处于展开状态,可以看出,HD版应用能够完整适配展开态,即电子设备处于展开态时具有较好的显示效果。当将电子设备折叠时,如图4中的(d)所示,由于屏幕提供的显示面积变小,图像的像素高宽比与屏幕显示区域的大小不匹配,会出现严重的画面丢失,导致画面显示不完整。
因此,鉴于上述问题,本申请实施例提供一种图像显示方法和电子设备,能够提高图像与屏幕的适配性,使得图像在电子设备屏幕上具有较好的显示效果,避免出现黑边和画面丢失问题,从而提升用户体验。
图5示出了本申请实施例提供的一种图像显示方法的示意性流程图。该方法300应用于电子设备,示例性的,该电子设备可以为上文描述的电子设备100。更为具体地,该方法300可以由电子设备中的图形处理器GPU或者用于处理图像的其他单元/模块执行。
本申请实施例中,电子设备100包括多个显示区,该多个显示区中的至少两个显示区的显示规格不同。这里,显示区是指能够单独显示图像的区域。
本申请实施例中,该多个显示区可以位于同一个显示屏,也可以位于不同的显示屏。其中,位于同一个显示屏的不同显示区之间,所占据的显示屏的区域(或者称所占据的像素点)可以有重叠,也可以无重叠。
作为示例而非限定,图6示出了一种折叠屏设备处于展开态的示意图。该折叠屏设备包括可折叠显示屏101,其中可折叠显示屏101可以沿图中所示的折叠轴线折叠或打开。当可折叠显示屏101处于折叠状态时,电子设备可以通过可折叠显示屏101的位于折叠轴线左边的区域显示图像,该左边区域即可以定义为一个显示区,例如称为显示区A。电子设备也可以通过可折叠显示屏101的位于折叠轴线右边的区域显示图像,该右边区域即可以定义为另一个显示区,例如称为显示区B。当可折叠显示屏101处于展开状态时,电子设备可以通过可折叠显示屏101的整块区域显示图像,该整块区域即可以定义为又一个显示区,例如称为显示区C。可以看出,在图6的示例中,显示区A、B、C均位于可折叠显示屏101,其中显示区A和显示区B的显示面积无重叠,而显示区A和显示区B均为显示区C的显示面积的一部分。当然,在其他实施例中,随着可折叠显示屏101的折叠方式的不同,例如可折叠显示屏101沿任意轴线折叠,也可能存在两个显示区之间有部分显示面积重叠。本申请实施例对于显示区个数、形成方式以及不同显示区之间的空间关系等均不作任何限定。
需要说明的是,本申请实施例中所涉及的“可折叠显示屏”可以是柔性折叠屏,也可以是多屏折叠屏。其中柔性折叠屏是指显示屏的部分(如可折叠的部分)或全部采用柔性材质制成,其本质上是一个完整的显示屏。多屏折叠屏是指多块单独的屏幕通过折叠轴连接而成的显示屏,其中每个屏都可以绕与其连接的折叠轴转动,实现多屏折叠屏的折叠和展开。
可选地,本申请实施例中,显示规格包括分辨率和/或宽高比。
显示区的分辨率,是指该显示区内显示的像素个数,通常可以表示为横纵方向上的像素点数,即像素宽×像素高。像素宽是指该显示区在水平方向上的像素个数,像素高是指该显示区在数值方向上的像素个数。例如该显示区的分辨率为720×1080,表示的是该显示区在水平方向包括720像素,在竖直方向包括1080像素。本申请实施例中,对于如何定义水平方向和竖直方向可参考现有方案,例如可以定义与电子设备的短边平行的方向为水平方向,与电子设备的长边平行的方向为竖直方向。
显示区的宽高比,是指该显示区的宽度与高度的比值,通常可以表示为(宽:高)。例如,该显示区的宽高比为16:9或4:3。本申请实施例中,对于如何定义显示区的宽和显示区的高可参考现有方案。
一般而言,手机、电脑等电子设备的屏幕上,像素点都是正方形的。这种情况下,某个显示区的分辨率与宽高比是对应的,例如该显示区的分辨率为1024×768,可以得到该显示区的宽高比为1024:768=4:3。在像素点不是正方形的情况下,显示区的宽高比=(横向分辨率×横向像素长度):(纵向分辨率×纵向像素长度)。
在一些实施例中,显示区的显示规格可以是作为硬件参数预先存储的,即在电子设备出厂之前已经将各个显示区的显示规格存储在电子设备的存储器中。在另一些实施例中,显示区的显示规格可以是根据显示屏的实时显示情况计算得到的。例如可以根据显示区中被点亮的像素数确定该显示区的分辨率和/或宽高比。当然也可以通过其他一些方式获取显示区的显示规格,本申请实施例在此不再详述。
本申请实施例中,该多个显示区中的至少两个显示区的显示规格不同,可以理解为该至少两个显示区的分辨率和/或宽高比不同。
继续参考图5,图5所示的方法300包括步骤S310至S340。
S310,获取第一原始视频帧。
第一原始视频帧是电子设备100获取的视频流中的一帧。本申请实施例对第一原始视频帧的获取方式不作限定。
可选地,在一些实施例中,该第一原始视频帧可以是由该电子设备100的摄像头获取的。即,该电子设备100的摄像头获取到该第一原始视频帧,再传输给电子设备100内用于执行步骤S310的装置。这里,第一原始视频帧是该电子设备100的摄像头捕捉的、尚未经任何处理的图像数据。
可选地,在另一些实施例中,该第一原始视频帧也可以是由与电子设备100交互的另一电子设备的摄像头获取的。即,该另一电子设备的摄像头获取到该第一原始视频帧,再传输给电子设备100内用于执行步骤S310的装置。这里,第一原始视频帧是该另一电子设备的摄像头捕捉的、尚未经任何处理的图像数据。
作为示例而非限定,假设使用电子设备100的用户在使用视频通话功能,电子设备100可以调用本设备的摄像头进行图像的捕捉,也可以接收对方的摄像头所捕捉的图像。本端摄像头捕捉的图像和/或对端摄像头捕捉的图像可以显示于屏幕上。
可选地,在又一些实施例中,该第一原始视频帧可以是电子设备100从服务器或其他电子设备接收的。这里,该第一原始视频帧可以是经过其他电子设备处理但未经电子设备100处理的图像数据。
总而言之,该第一原始视频帧是指电子设备100获取的、未经电子设备100进一步处理(如裁剪处理)的图像数据。
S320,根据第一信息从多个显示区中确定目标显示区。
目标显示区为用户正在使用的或即将使用的显示区。该目标显示区可以包括该多个显示区中的一个或多个。
本申请实施例对于确定目标显示区的方式不作限定,具体可以参考现有方案。为方便理解,下面仅作示例性说明,但应理解,本申请并不限于此。
可选地,在一些实施例中,电子设备100包括可折叠显示屏。其中多个显示区中的至少部分显示区位于可折叠显示屏。该第一信息可以包括:可折叠显示屏的展折状态;和/或该至少部分显示区中互不重叠的显示区之间的空间位置关系。
作为一个示例,结合图6和图7所示,该电子设备100可以为外折型设备,即可折叠显示屏101折叠后屏幕裸露在外侧。该第一信息可以包括可折叠显示屏的展折状态和该至少部分显示区中互不重叠的显示区之间的空间位置关系。
具体地,该展折状态可以包括折叠状态和展开状态。当可折叠显示屏101处于折叠状态时,显示区A与显示区B的背面相对。当可折叠显示屏101处于展开状态时,显示区A与显示区B位于同一平面,且作为一个整体(即显示区C)显示图像。在一些实施例中,该展折状态还可以包括半展开状态(或称半折叠状态),在这种状态下,显示区A与显示区B之间的夹角大于180°且小于360°。
在该实施例中,由于显示区A与显示区B之间不重叠,该空间位置关系可以包括显示区A朝上且显示区B朝下,显示区A朝下且显示区B朝上,显示区A与显示区B朝向同一方向,或者显示区A与显示区B的朝向具有夹角,该夹角大于180°且小于360°。
例如,参考图7中的(a)所示,若展折状态为折叠状态,空间位置关系为显示区A朝上且显示区B朝下,则可以确定显示区A为目标显示区。这种状态下,显示区B可以熄屏,以节省电子设备的能耗。
再如,参考图7中的(b)所示,若展折状态为折叠状态,空间位置关系为显示区A朝下且显示区B朝上,则可以确定显示区B为目标显示区。这种状态下,显示区A可以熄屏,以节省电子设备的能耗。
又如,参考图7中的(c)所示,若展折状态为展开状态,空间位置关系为显示区A与显示区B朝向同一方向,则可以确定显示区C为目标显示区。
又如,若展折状态为半展开状态,空间位置关系为显示区A与显示区B的朝向具有夹角,则可以确定显示区A和显示区B为目标显示区,其中显示区A与显示区B可以分别独立显示图像。
当然,可以理解的是,在一些实施例中,空间位置关系也可以反映展折状态,因此也可以根据该至少部分显示区中互不重叠的显示区之间的空间位置关系去确定目标显示区。
作为另一个示例,结合图8所示,该电子设备100可以为内折型设备。电子设备100可以包括可折叠显示屏101和直板显示屏102,二者设置于电子设备在厚度方向上的两侧。可折叠显示屏101折叠后屏幕被合在内侧,直板显示屏102裸露在外侧且设置于电子设备的非折叠区。在一些实施例中,可折叠显示屏101也可以称为内屏或主屏,直板显示屏102也可以称为外屏或副屏。当可折叠显示屏101处于展开状态时,可折叠显示屏101的整块区域用于显示,因此可以定义该区域即为一个显示区,如显示区C。当可折叠显示屏101处于折叠状态时,直板显示屏102的整块区域用于显示,因此可以定义该区域为一个显示区,如显示区D。在这种情况下,该第一信息可以包括可折叠显示屏的展折状态。
例如,参考图8中的(a)所示,若展折状态为展开状态,则可以确定显示区C为目标显示区。这种状态下,显示区D可以熄屏,以节省电子设备的能耗。
又如,参考图8中的(b)所示,若展折状态为折叠状态,则可以确定显示区D为目标显示区。这种状态下,显示区C可以熄屏,以节省电子设备的能耗。
作为再一个示例,结合图9所示,该电子设备100可以为三段折叠设备。如图9中的(a)所示,电子设备100包括可折叠显示屏101,该可折叠显示屏101可沿两条平行的折叠轴线折叠。这样,折叠轴线①左边的区域可以定义为显示区A,折叠轴线①与②之间的区域可以定义为显示区B,折叠轴线②右边的区域可以定义为显示区C,折叠轴线②左边的区域可以定义为显示区D(即显示区A和显示区B作为一个整体),折叠轴线①右边的区域可以定义为显示区E(即显示区B和显示区C作为一个整体),可折叠显示区101的整块区域可以定义为显示区F(即显示区A、B、C作为一个整体)。
可选地,可折叠显示屏101的折叠方式可以为如图9中的(b)所示,即显示区A与显示区C向后折叠,显示区A与显示区C中的一者以及显示区B裸露在外。可选地,可折叠显示屏101的折叠方式可以为如图9中的(c)所示,即显示区A、显示区B和显示区C以N字型折叠,显示区A或显示区C裸露在外,另外两个显示区相对。在其他实施例中,图9中的(a)所示的可折叠显示屏101还可以有其他折叠方式,在此不再详述。
在该实施例中,可以根据可折叠显示屏101的展折状态以及互不重叠的显示区A、B、C之间的空间位置关系,从显示区A、B、C、D、E、F中确定目标显示区。具体确定方式可参考现有方案,在此不再一一详述。
作为又一个示例,电子设备100可以为直板屏设备,例如电子设备包括两个显示屏,该两个显示屏均为直板显示屏,二者设置于电子设备在厚度方向上的两侧。每个显示屏可以包括一个显示区,如分别为显示区C和显示区D。在这种情况下,该第一信息可以包括互不重叠的显示区之间的空间位置关系。
例如,空间位置关系为显示区C朝上且显示区D朝下,则可以确定显示区C为目标显示区。这种状态下,显示区D可以熄屏,以节省电子设备的能耗。
又如,空间位置关系为显示区D朝上且显示区C朝下,则可以确定显示区D为目标显示区。这种状态下,显示区C可以熄屏,以节省电子设备的能耗。
作为又一个示例,电子设备100可以包括一个直板显示屏,但该直板显示屏被划分为多个显示区以分别显示图像。如该直板显示屏被用户划分为显示区A和显示区B。在这种情况下,第一信息可以包括检测到的用户操作。
例如,若检测到用户点击显示区A,则可以确定显示区A为目标显示区;若检测到用户点击显示区B,则可以确定显示区B为目标显示区。
需要说明的是,本申请实施例中的“朝上”表示与水平面垂直向上的方向,“朝下”表示与水平面垂直向下的方向。应注意,本申请实施例中“朝上”和“朝下”可以是一个广义的概念,在一些实施例中面向用户的方向可以认为是朝上,背向用户的方向可以认为是朝下。
另外,上述示例中所涉及的“展折状态”以及“空间位置关系”可以由电子设备中的检测模块检测,检测模块可以包括各种传感器,例如重力传感器、陀螺仪、加速度传感器、图像传感器、角度传感器等。也就是说,电子设备可以结合传感器的参数确定“展折状态”以及“空间位置关系”等。
在一些实施例中,在步骤S320之后,方法300还包括:获取目标显示区的显示规格。
可选地,目标显示区的显示规格为预先存储的。也就是说,电子设备在出厂之前已经将多个显示区的显示规格存储在电子设备中,当需要获取目标显示区的显示规格时,可以直接从存储器中获取。
可选地,目标显示区的显示规格可以是根据电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。例如,电子设备上实际显示图像的区域的分辨率和/或宽高比即为目标显示区的显示规格。在一些实施例中,该实际显示图像的区域的分辨率和/或宽高比可以根据该实际显示图像的区域内被点亮的像素数确定。
可选地,目标显示区的显示规格也可以是在对上一原始视频帧进行处理的过程中已经使用过的参数,若用于显示第一原始视频帧内容的显示区与用于显示上一原始视频帧内容的显示区相同,则在该步骤中目标显示区的显示规格可以沿用上一原始视频帧处理过程中使用的显示规格。该显示规格的参数可以存储于缓存中。
S330,根据目标显示区的显示规格对第一原始视频帧进行处理,得到第一图像,其中第一图像的分辨率与目标显示区的显示规格相匹配。
这里,第一图像的分辨率与目标显示区的显示规格相匹配包括:
第一图像的分辨率与目标显示区的分辨率相同;或
第一图像的分辨率略大于目标显示区的分辨率,例如第一图像的像素宽比目标显示区的像素宽多第一预设数值,第一图像的像素高比目标显示区的像素高多第二预设数值;或
第一图像的像素宽与目标显示区的像素宽的比值接近或等于第一图像的像素高与目标显示区的像素高的比值;或
第一图像的像素宽与像素高的比值接近或等于目标显示区的宽高比。
换言之,第一图像的分辨率与目标显示区的显示规格相匹配时,第一图像在目标显示区具有较好的显示效果。
可选地,在一些实施例中,步骤S330具体可以包括:
根据目标显示区的显示规格,确定待显示区域,其中待显示区域的显示规格大于或等于目标显示区的显示规格;
根据待显示区域的显示规格对第一原始视频帧进行裁剪,得到第一图像,第一图像为待显示区域内的图像。
本申请实施例中,待显示区域的显示规格等于目标显示区的显示规格,可以包括:
待显示区的分辨率等于目标显示区的分辨率;或,
待显示区的宽高比等于目标显示区的宽高比。
本申请实施例中,待显示区域的显示规格大于目标显示区的显示规格,可以包括:
待显示区域的分辨率大于目标显示区的分辨率,例如待显示区域的像素宽比目标显示区的像素宽多第三预设数值,待显示区域的像素高比目标显示区的像素高多第四预设数值;或,
待显示区域的像素宽与目标显示区的像素宽的比值大于1(例如大于1但小于1.3),待显示区域的像素高与目标显示区的像素高的比值大于1(例如大于1但小于1.3)。例如待显示区域的显示规格可以由目标显示区的显示规格放大1.05倍或其他倍数得到。
待显示区域的显示规格大于目标显示区的显示规格时,可以使第一图像在目标显示区的边缘区域也具有完整的显示,改善用户观感,提升用户体验。
经过上述步骤得到的第一图像,其显示规格大于或等于目标显示区的显示规格。这样,第一图像在目标显示区上显示时,能够完整匹配目标显示区的大小,从而具有较好的显示效果,而不会出现画面缺失以及黑边等问题。
可选地,在对第一原始视频帧进行裁剪时,可以以第一原始视频帧的焦点为中心,将第一原始视频帧的位于待显示区域之外的区域的图像裁剪掉,得到位于待显示区域的图像,即第一图像。
一般地,第一原始视频帧的焦点位置在拍摄时已经确定。因此在裁剪过程中,电子设备可以直接确定第一原始视频帧的焦点位置。
可选地,在对第一原始视频帧进行裁剪时,可以使第一原始视频帧中画面最丰富的部分包括在待显示区域内。
通过上述处理方式,可以保证在对第一原始视频帧进行裁剪时,保留住视频帧中的主要画面,从而在显示区中显示时不影响用户观感体验。
作为示例而非限定,参考图10所示,虚线所示的S1区域为第一原始视频帧的全部内容所在的区域,即原始图像数据。实线所示的S2区域为待显示区域,包括第一图像的内容。S2区域的分辨率可以大于或等于目标显示区的分辨率。
当然,在其他实施例中,在裁剪原始视频帧时,可以将待显示区域的一条边为基准边(如以宽为基准边,或以高为基准边),使其与第一原始视频帧的一条边对应,然后从第一原始视频帧的另一条边将第一原始帧的超出待显示区域部分裁剪掉。
S340,通过目标显示区显示第一图像。
本申请实施例中,在显示第一原始视频帧的内容之前,电子设备可以根据目标显示区的显示规格对第一原始视频帧进行处理,得到分辨率与目标显示区的显示规格相匹配的第一图像。这样目标显示区在显示第一图像时,第一图像能够完整匹配目标显示区的大小,从而具有较好的显示效果,避免了黑边问题以及画面严重缺失问题的产生,从而提升了用户体验。另外,不论使用电子设备的哪个显示区显示图像,显示区都能够得到最大化的利用,这样可以充分利用大屏优势,显示更多内容,提升用户观感。
上述实施例中,第一原始视频帧可以指电子设备获取到的视频流中的任意一帧,因此对于视频流中的每一帧,均可以执行方法300以及上述提及的可选实施方式。
在其他实施例中,第一原始视频帧也可以为电子设备获取到的视频流中的某些帧,例如在目标显示区切换后所显示的视频帧。而对其他视频帧的处理过程,可以包括如下步骤:
获取第二原始视频帧;
当满足第一预设条件时,根据目标显示区的显示规格对第二原始视频帧进行处理,得到第二图像,其中第二图像的分辨率与目标显示区的显示规格相匹配;
通过目标显示区显示第二图像。
其中,第一预设条件包括以下至少一项:
电子设备包括可折叠显示屏,且可折叠显示屏的展折状态未发生改变;
电子设备包括至少两个显示屏,且至少两个显示屏的显示状态未发生切换。
这里的目标显示区可以为用于显示第二原始视频帧的前一视频帧所用的显示区。也就是说,当用于显示第二原始视频帧的目标显示区与用于显示第二原始视频帧的前一视频帧的目标显示区相同时,可以直接使用之前的目标显示区的显示规格。
当然,判断用于显示图像的显示区是否发生变化的方式可以有很多种,根据电子设备的类型以及屏幕类型的不同而有所不同。下面仅作示例性说明。
例如,电子设备包括可叠显示屏,且可折叠显示屏的展折状态未发生改变,可以认为用于显示图像的目标显示区未发生变化。
再如,包括至少两个显示屏,且至少两个显示屏的显示状态未发生切换,可以认为用于显示图像的目标显示区未发生变化。
在一些实施例中,目标显示区的显示规格在获取后可以作为单独的参数存储起来,若目标显示区不变,则在处理原始视频帧时可以直接读取,若目标显示区变化,则可以更新所存储的显示规格。
例如,当满足第二预设条件时,更新目标显示区。具体可以为更新目标显示区的显示规格。
其中,第二预设条件包括以下至少一项:
电子设备包括可折叠显示屏,且可折叠显示屏的展折状态发生改变;
电子设备包括至少两个显示屏,且至少两个显示屏的显示状态发生切换。
这种方式中,只有在目标显示区发生变化时,才获取并更新显示规格,而在目标显示区未发生变化时,所存储的目标显示区的显示规格可以直接取用,可以减少运算过程,节约计算资源和电子设备能耗。
需要说明的是,上述所涉及的第一原始视频帧与第二原始视频帧可以是相同帧,也可以是属于同一视频流中的不同帧。本申请实施对此不作限定。
上述方法300是从电子设备内部处理的角度对本申请实施例提供的图像显示方法进行介绍,下面结合图11-12从电子设备所显示的用户界面角度对本申请实施例提供的图像显示方式作进一步的阐述。
图11示出了本申请实施例提供的一种图像显示方法的示意性流程图。如图11所示,该方法400应用于电子设备,例如具有如图1所示的硬件结构和/或如图2所示的软件架构的电子设备100。
该电子设备包括第一显示区和第二显示区,第一显示区的显示规格与第二显示区的显示规格不同。例如,第一显示区的分辨率与第二显示区的分辨率不同,或者第一显示区的宽高比与第二显示区的宽高比不同。
该方法400包括步骤S410至S420,下面结合附图对各个步骤进行详细介绍。
S410,通过第一显示区显示第一图像。
第一图像是根据第一显示区的显示规格对第一原始视频帧进行处理得到的,第一图像的分辨率与第一显示区的显示规格相匹配。
可选地,在执行该步骤S410之前,可以执行方法300中的步骤S340之前所执行的步骤以及可选的实施方式。具体过程参考上述相关描述,为简洁,在此不再赘述。可以认为,这里的第一显示区即为用于显示第一原始视频帧的目标显示区。
S420,当电子设备的目标显示区由第一显示区切换为第二显示区时,通过第二显示区显示第二图像。
第二图像是根据第二显示区的显示规格对第二原始视频帧进行处理得到的,第二图像的分辨率与第二显示区的显示规格相匹配。
可选地,在执行该步骤S420之前,可以执行方法300中的步骤S340之前所执行的步骤以及可选的实施方式。具体过程参考上述相关描述,为简洁,在此不再赘述。可以认为,这里的第二显示区即为用于显示第二原始视频帧的目标显示区。
在一些实施例中,电子设备可以包括可折叠显示屏,其中第一显示区和第二显示区位于可折叠显示屏。例如,第一显示区可以为如图7所示的显示区A或显示区B,第二显示区可以为如图7所示的显示区C。
在一些实施例中,电子设备可以包括可折叠显示屏和直板显示屏,第一显示区和第二显示区分别位于可折叠显示屏和直板显示屏。例如,第一显示区可以为如图8所示的显示区C,第二显示区可以为如图8所示的显示区D。
本申请实施例中,在步骤S420之前,先确定电子设备的目标显示区发生切换。确定方式有很多种,下面仅作示例性说明。
作为一个示例,若电子设备包括可折叠显示屏,且该可折叠显示屏为外折型,如图7所示,则在检测到可折叠显示屏由展开态切换为折叠态时,确定电子设备的目标显示区由第一显示区切换为第二显示区,其中第一显示区为可折叠显示屏处于展开态时的实际显示区域,第二显示区为可折叠显示屏处于折叠态时的实际显示区域。或者,在检测到可折叠显示屏由折叠态切换为展开态时,确定电子设备的目标显示区由第一显示区切换为第二显示区。其中第一显示区为可折叠显示屏处于折叠态时的实际显示区域,第二显示区为可折叠显示屏处于展开态时的实际显示区域。
作为另一个示例,若电子设备包括第一显示屏和第二显示屏,第一显示区位于第一显示屏,第二显示区位于第二显示屏。则在检测到屏幕切换信息时,确定电子设备的目标显示区由第一显示区切换为第二显示区。屏幕切换信息用于指示电子设备上显示图像的显示屏由第一显示屏切换为第二显示屏。其中第一显示区为第一显示屏的实际显示区域,第二显示区为第二显示屏的实际显示区域。
在一些实施例中,第一显示区的显示规格和/或第二显示区的显示规格为预先存储的,或者是根据电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。
本申请实施例中,在步骤S410之前先获取第一图像。
可选地,在一些实施例中,可以先根据第一显示区的显示规格,确定待显示区域,其中待显示区域的显示规格大于或等于第一显示区的显示规格。然后根据待显示区域的显示规格对第一原始视频帧进行裁剪,得到第一图像,第一图像为待显示区域内的图像。
本申请实施例中,在步骤S420之前先获取第二图像。
可选地,在一些实施例中,可以先根据第二显示区的显示规格,确定待显示区域,其中待显示区域的显示规格大于或等于第二显示区的显示规格。然后再根据待显示区域的显示规格对第二原始视频帧进行裁剪,得到第二图像,第二图像为待显示区域内的图像。
第一图像和第二图像的获取方式类似,不同之处在于,由于第一显示区的显示规格与第二显示区的显示规格不同,所以根据第一显示区的显示规格所确定的待显示区域与根据第二显示区的显示规格所确定的待显示区域不同。裁剪过程中,可以以第一原始视频帧或第二原始视频帧的焦点位置为中心进行裁剪。或者也可以使待显示区域包括第一原始视频帧或第二原始帧中画面最丰富的部分。
可选地,第一原始视频帧与第二原始视频帧可以是同一视频帧,也可以是属于同一视频流的不同帧。例如第二原始视频是位于第一原始视频帧之后的帧。
为方便理解,下面结合附图举例说明。
图12中(a)示出的是电子设备获取的第一原始视频帧和第二原始视频帧,该第一原始视频帧与第二原始视频帧所包括的图像数据相同。图12中的(b)示出的电子设备的第一显示区,图12中的(c)示出的是电子设备的第二显示区。
参考图12中的(b)所示,当第一显示区为目标显示区时,第一显示区所显示的图像(即第一图像)与第一显示区的显示规格相匹配,能够较为完整的显示第一原始视频帧中的主要内容。
参考图12中的(c)所示,当第二显示区为目标显示区时,第二显示区所显示的图像(即第二图像)与第二显示区的显示规格相匹配,也能够较为完整的显示第二原始视频帧中的主要内容。
视频通话是电子设备比较常用的一种功能,以折叠屏设备为例,当电子设备在折叠态和展开态之间切换时,屏幕提供的显示面积发生改变,因而视频通话的画面也随之改变。本申请实施例提供的图像显示方法应用于视频通话过程时,在屏幕大小改变的情况下,视频通话内容也可以与屏幕大小适配,实现最契合屏幕大小的显示效果。下面以电子设备为折叠屏设备且上述方法300或方法400应用于视频通话为例,结合具体的例子描述本申请提供的图像显示方法。
该具体示例中的电子设备可以包括如图13所示的硬件结构。如图13所示,电子设备可以包括摄像头510、存储器520、处理器530、图像处理单元540、显示屏550。
摄像头510,用于捕捉图像,其可以为电子设备的前置摄像头或后置摄像头。在具体实现中,可以通过检测用户的切换操作,可以切换不同的摄像头。
存储器520,用于存储数据,例如存储应用程序的安装程序以及运行过程中的数据。
处理器530,用于在视频通话过程中,根据电子设备的状态等信息确定目标显示区及其规格,并将相关规格参数传递到图像处理单元540。同时,处理器530还可以用来计算并控制显示在显示屏550上的显示数据。
图像处理单元540,用于对摄像头捕捉的原始图像数据进行处理,使处理后的图像数据适配显示屏550的实际显示规格,即目标显示区的显示规格。
显示屏550,可以形成多个显示区,用来可视化应用程序的运行界面。
在一些实施例中,图像处理单元550可以集成于处理器530中。
如图14所示,在视频通话过程中,电子设备所执行的方法600包括:
S610,获取原始图像数据。
当电子设备在进行视频通话功能时,会调用摄像头,并通过摄像头捕捉图像。原始图像数据为摄像头捕捉的、尚未经过任何处理(如裁剪处理)的图像数据。该原始图像数据可以是本端电子设备的摄像头捕捉的,也可以是对端电子设备的摄像头捕捉的。这里的原始图像数据可以为前述第一原始视频帧的一个示例。
S620,确定目标显示区。
该步骤用于确定图像数据的传输对象,即确定图像数据最终会显示在哪个显示区上。一般在确定目标显示区后,即可得到目标显示区的显示规格,如像素高、像素宽等分辨率参数等。
若电子设备为包括内折型设备,则电子设备包括两个独立的显示屏,即内屏和外屏。内屏为可折叠显示屏,外屏为直板显示屏。两个显示屏的大小不一样。内屏的整块区域可以作为一个显示区,外屏的整块区域可以作为另一个显示区。当电子设备在折叠状态与展开状态之间切换时,电子设备需要更换显示屏进行显示,将显示内容(即视频帧图像)从内屏转到外屏显示或从外屏转到内屏显示。
例如,在电子设备处于折叠状态下,外屏用于显示,展开状态下,内屏用于显示。当发生状态切换时,显示屏会对应改变,相应地目标显示区会对应改变。电子设备从折叠状态切换为展开状态,目标显示区由外屏变为内屏;电子设备从展开状态完全折叠至折叠状时,目标显示区由内屏变为外屏。
对于内折型设备来说,由于两个显示屏的显示区域大小通常不会发生改变,因此,可以直接从硬件参数获取到目标显示区的显示规格,即为显示屏的实际显示规格。
若电子设备为外折型设备,则电子设备可以只包括一个显示屏,该显示屏为可折叠显示屏。根据电子设备的展折状态,可折叠显示屏可以被划分为不同大小的区域作为显示区。当电子设备在折叠状态和展开状态之间切换时,在折叠到一定角度时,电子设备会更改显示屏上的显示区域的大小。例如扩大显示面积至整个可折叠显示屏完全显示,或缩小显示面积至仅有一个分屏显示,另一个分屏熄屏不显示。
对于外折型设备来说,随着电子设备展折状态的变化,可折叠显示屏上用于显示图像的区域也会发生改变,相应地目标显示区会对应改变。在实际应用中,可以将不同状态下可折叠显示屏的实际显示区域确定为目标显示区,该实际显示区域的显示规格也就是目标显示区的显示规格。
当然,若外折型设备所包括显示区域相对固定的话,也可以在逻辑上认为电子设备包括三个显示屏,即可以单独显示的两个分屏以及由两个分屏同时显示组成的完整大屏。在实际应用中,可以根据电子设备的状态变化(折叠/展开)结合传感器的参数(例如前置图像传感器检测人脸、陀螺仪参数等)从3个显示屏中确定电子设备正在使用的屏幕。
这种情况下,所划分的3个显示屏具有既定的显示区域,对应的显示区域的显示参数也固定。因此,目标显示屏确定时,该目标显示屏的实际显示规格就也对应确定。因此,可以直接从硬件参数获取到目标显示区的显示规格,即所确定的目标显示屏的显示规格。
在一些实施例中,电子设备可以在确定目标显示区后单独存储目标显示区的显示规格(即显示参数),当目标显示区变化时,可以更新该存储区域所存储的显示参数。
例如,当折叠屏设备的折叠状态不发生改变或者双屏设备不主动切换显示屏时,目标显示区及其显示规格通常不会发生改变。因此,目标显示区及其显示规格的获取可以仅在初始阶段获取一次,之后图像帧的处理沿用第一次的目标显示区及其实际显示规格。当检测到折叠状态发生改变或双屏设备主动切换显示屏时,可以对目标显示区的显示参数进行更新。即图像输出的屏幕及屏幕大小改变时,才更新显示规格,可以减少运算过程。
当然,在其他实施例中,也可以对每帧视频帧都确定目标显示区及其显示规格,再根据目标显示区的显示规格对原始图像数据进行处理。
S630,根据目标显示区的显示规格对原始图像数据进行处理,得到待显示数据。
这里待显示数据可以为前述第一图像的一个示例。
在确定目标显示区的显示规格确定后,即可对原始图像数据进行处理。例如将原始图像根据目标显示区的显示规格进行裁剪,使得其在目标显示区上具有较好的显示效果,能够完整的匹配目标显示区的大小,而不会出现画面缺失、黑屏等现象。
可选地,在裁剪时,可以首先确定原始图像的焦点位置,然后以焦点位置作为中心,根据目标显示区的显示规格确定待显示区域,将待显示区域外的图像裁剪掉。或者,在确定待显示区域时,可以将一个比目标显示区的显示规格略大的区域作为待显示区域,然后再将待显示区域外的图像裁剪掉。例如,待显示区域可以是目标显示区等比例大小的1.05倍(具体倍数可以根据实际情况进行定义),这样在显示区的边缘区域也具有完整的显示。
S640,将待显示数据输送到目标显示区显示。
在步骤S630中,电子设备可以根据目标显示区的显示规格得到不同显示大小的待显示数据,因此在步骤S640中,即使电子设备在不同状态间切换,显示屏上也可以完整显示内容,实现了显示屏最终显示的图像完全契合了不同状态下的折叠设备。
上文结合图1至图14,详细描述了本申请实施例提供的图像显示方法,下面将结合图15详细描述本申请的装置实施例。应理解,本申请实施例中的图像显示装置可以执行前述本申请实施例的各种方法,即以下各种产品的具体工作过程,可以参考前述方法实施例中的对应过程。
图15是本申请实施例的图像显示装置700的示意性框图。应理解,装置700能够执行图5至图14的方法中的各个步骤,为了避免重复,此处不再详述。该装置700可以设置于电子设备中。该电子设备包括多个显示区,该多个显示区中的至少两个显示区的显示规格不同。装置700包括:获取单元710和处理单元720。
获取单元710,用于获取第一原始视频帧。
处理单元720,用于根据第一信息从多个显示区中确定目标显示区。
处理单元720还用于,根据该目标显示区的显示规格对该第一原始视频帧进行处理,得到第一图像,其中该第一图像的分辨率与该目标显示区的显示规格相匹配。
处理单元720还用于,通过目标显示区显示该第一图像。
可选地,在一种可能的实现方式中,该显示规格包括分辨率和/或宽高比。
可选地,在一种可能的实现方式中,该电子设备包括可折叠显示屏,该多个显示区中的至少部分显示区位于该可折叠显示屏,该第一信息包括:该可折叠显示屏的展折状态;和/或该至少部分显示区中互不重叠的显示区之间的空间位置关系。
可选地,在一种可能的实现方式中,获取单元710还用于,获取该目标显示区的显示规格。
可选地,在一种可能的实现方式中,该目标显示区的显示规格为预先存储的;或者,该目标显示区的显示规格是根据该电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。
可选地,在一种可能的实现方式中,处理单元720具体用于,根据该目标显示区的显示规格,确定待显示区域,其中该待显示区域的显示规格大于或等于该目标显示区的显示规格。根据该待显示区域的显示规格对该第一原始视频帧进行裁剪,得到该第一图像,该第一图像为该待显示区域内的图像。
可选地,在一种可能的实现方式中,处理单元720具体用于,以该第一原始视频帧的焦点为中心,将该第一原始视频帧的位于该待显示区域之外的区域的图像裁剪掉,得到位于该待显示区域的图像。
可选地,在一种可能的实现方式中,该第一原始视频帧是由该电子设备的摄像头获取的;或者,该第一原始视频帧是由与该电子设备交互的另一电子设备的摄像头获取的。
可选地,在一种可能的实现方式中,获取单元710还用于,获取第二原始视频帧。
处理单元720还用于,当满足第一预设条件时,根据该目标显示区的显示规格对该第二原始视频帧进行处理,得到第二图像,其中该第二图像的分辨率与该目标显示区的显示规格相匹配。
处理单元720还用于,通过该目标显示区显示该第二图像。
其中,该第一预设条件包括以下至少一项:
该电子设备包括可折叠显示屏,且该可折叠显示屏的展折状态未发生改变;
该电子设备包括至少两个显示屏,且该至少两个显示屏的显示状态未发生切换。
可选地,在一种可能的实现方式中,处理单元720还用于,当满足第二预设条件时,更新该目标显示区。
其中,该第二预设条件包括以下至少一项:
该电子设备包括可折叠显示屏,且该可折叠显示屏的展折状态发生改变;
该电子设备包括至少两个显示屏,且该至少两个显示屏的显示状态发生切换。
本申请还提供了另一种装置,该装置应用于电子设备,该电子设备可以包括第一显示区和第二显示区,该第一显示区的显示规格与该第二显示区的显示规格不同。
该装置可以包括处理单元,用于:
通过该第一显示区显示第一图像,该第一图像是根据该第一显示区的显示规格对第一原始视频帧进行处理得到的,该第一图像的分辨率与该第一显示区的显示规格相匹配。当该电子设备的目标显示区由该第一显示区切换为该第二显示区时,通过该第二显示区显示第二图像,该第二图像是根据该第二显示区的显示规格对第二原始视频帧进行处理得到的,该第二图像的分辨率与该第二显示区的显示规格相匹配。
可选地,在一种可能的实现方式中,该显示规格包括分辨率和/或宽高比。
可选地,在一种可能的实现方式中,该电子设备包括可折叠显示屏,该第一显示区和该第二显示区位于该可折叠显示屏。
可选地,在一种可能的实现方式中,该可折叠显示屏为外折型,该装置还包括检测单元和确定单元。
检测单元用于,检测到该可折叠显示屏由展开态切换为折叠态;
确定单元用于,确定该电子设备的目标显示区由该第一显示区切换为该第二显示区,其中该第一显示区为该可折叠显示屏处于展开态时的实际显示区域,该第二显示区为该可折叠显示屏处于折叠态时的实际显示区域。或者,
检测单元用于,检测到该可折叠显示屏由折叠态切换为展开态;
确定单元用于,确定该电子设备的目标显示区由该第一显示区切换为该第二显示区,其中该第一显示区为该可折叠显示屏处于折叠态时的实际显示区域,该第二显示区为该可折叠显示屏处于展开态时的实际显示区域。
可选地,在一种可能的实现方式中,该电子设备包括第一显示屏和第二显示屏,该第一显示区位于该第一显示屏,该第二显示区位于该第二显示屏。
可选地,在一种可能的实现方式中,检测单元还用于:检测到屏幕切换信息,该屏幕切换信息用于指示该电子设备上显示图像的显示屏由该第一显示屏切换为该第二显示屏。
确定单元还用于,确定该电子设备的目标显示区由该第一显示区切换为该第二显示区,其中该第一显示区为该第一显示屏的实际显示区域,该第二显示区为该第二显示屏的实际显示区域。
可选地,在一种可能的实现方式中,该第一显示区的显示规格和/或该第二显示区的显示规格为预先存储的,或者是根据该电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。
可选地,在一种可能的实现方式中,处理单元还用于:根据该第二显示区的显示规格,确定待显示区域,其中该待显示区域的显示规格大于或等于该第二显示区的显示规格;根据该待显示区域的显示规格对该第二原始视频帧进行裁剪,得到该第二图像,该第二图像为该待显示区域内的图像。
可选地,在一种可能的实现方式中,该第一原始视频帧与该第二原始视频帧属于同一视频流,且该第二原始视频是位于该第一原始视频帧之后的帧。
本申请实施例还提供一种电子设备,包括:多个显示区,该多个显示区中的至少两个显示区的显示规格不同;一个或多个处理器;一个或多个存储器;该一个或多个存储器存储有一个或多个计算机程序,该一个或多个计算机程序包括指令,当该指令被该一个或多个处理器执行时,使得该电子设备执行如图4至14所示方法中的各个步骤。
本申请实施例还提供了一种可读存储介质,包括计算机指令,当该计算机指令在电子设备上运行时,使得该电子设备执行如图4至14所示方法中的各个步骤。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的***、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的***、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (21)

1.一种图像显示方法,其特征在于,应用于电子设备,所述电子设备包括多个显示区,所述多个显示区中的至少两个显示区的显示规格不同,所述方法包括:
获取第一原始视频帧;
根据第一信息从所述多个显示区中确定目标显示区;
根据所述目标显示区的显示规格对所述第一原始视频帧进行处理,得到第一图像,其中所述第一图像的分辨率与所述目标显示区的显示规格相匹配;
通过所述目标显示区显示所述第一图像。
2.根据权利要求1所述的方法,其特征在于,所述显示规格包括分辨率和/或宽高比。
3.根据权利要求1或2所述的方法,其特征在于,所述电子设备包括可折叠显示屏,所述多个显示区中的至少部分显示区位于所述可折叠显示屏,所述第一信息包括:
所述可折叠显示屏的展折状态;和/或
所述至少部分显示区中互不重叠的显示区之间的空间位置关系。
4.根据权利要求1至3中任一项所述的方法,其特征在于,在所述根据第一信息从所述多个显示区中确定目标显示区之后,所述方法还包括:
获取所述目标显示区的显示规格。
5.根据权利要求1至4中任一项所述的方法,其特征在于,
所述目标显示区的显示规格为预先存储的;或者,
所述目标显示区的显示规格是根据所述电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述根据所述目标显示区的显示规格对所述第一原始视频帧进行处理,得到第一图像,包括:
根据所述目标显示区的显示规格,确定待显示区域,其中所述待显示区域的显示规格大于或等于所述目标显示区的显示规格;
根据所述待显示区域的显示规格对所述第一原始视频帧进行裁剪,得到所述第一图像,所述第一图像为所述待显示区域内的图像。
7.根据权利要求6所述的方法,其特征在于,所述根据所述待显示区域的显示规格对所述第一原始视频帧进行裁剪,包括:
以所述第一原始视频帧的焦点为中心,将所述第一原始视频帧的位于所述待显示区域之外的区域的图像裁剪掉,得到位于所述待显示区域的图像。
8.根据权利要求1至7中任一项所述的方法,其特征在于,
所述第一原始视频帧是由所述电子设备的摄像头获取的;或者,
所述第一原始视频帧是由与所述电子设备交互的另一电子设备的摄像头获取的。
9.根据权利要求1至8中任一项所述的方法,其特征在于,所述方法还包括:
获取第二原始视频帧;
当满足第一预设条件时,根据所述目标显示区的显示规格对所述第二原始视频帧进行处理,得到第二图像,其中所述第二图像的分辨率与所述目标显示区的显示规格相匹配;
通过所述目标显示区显示所述第二图像;
其中,所述第一预设条件包括以下至少一项:
所述电子设备包括可折叠显示屏,且所述可折叠显示屏的展折状态未发生改变;
所述电子设备包括至少两个显示屏,且所述至少两个显示屏的显示状态未发生切换。
10.根据权利要求1至9中任一项所述的方法,其特征在于,所述方法还包括:
当满足第二预设条件时,更新所述目标显示区;
其中,所述第二预设条件包括以下至少一项:
所述电子设备包括可折叠显示屏,且所述可折叠显示屏的展折状态发生改变;
所述电子设备包括至少两个显示屏,且所述至少两个显示屏的显示状态发生切换。
11.一种图像显示方法,其特征在于,应用于电子设备,所述电子设备包括第一显示区和第二显示区,所述第一显示区的显示规格与所述第二显示区的显示规格不同,所述方法包括:
通过所述第一显示区显示第一图像,所述第一图像是根据所述第一显示区的显示规格对第一原始视频帧进行处理得到的,所述第一图像的分辨率与所述第一显示区的显示规格相匹配;
当所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区时,通过所述第二显示区显示第二图像,所述第二图像是根据所述第二显示区的显示规格对第二原始视频帧进行处理得到的,所述第二图像的分辨率与所述第二显示区的显示规格相匹配。
12.根据权利要求11所述的方法,其特征在于,所述显示规格包括分辨率和/或宽高比。
13.根据权利要求11或12所述的方法,其特征在于,所述电子设备包括可折叠显示屏,所述第一显示区和所述第二显示区位于所述可折叠显示屏。
14.根据权利要求13所述的方法,其特征在于,所述可折叠显示屏为外折型,在所述通过所述第二显示区显示第二图像之前,所述方法还包括:
检测到所述可折叠显示屏由展开态切换为折叠态;
确定所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区,其中所述第一显示区为所述可折叠显示屏处于展开态时的实际显示区域,所述第二显示区为所述可折叠显示屏处于折叠态时的实际显示区域;或者,
检测到所述可折叠显示屏由折叠态切换为展开态;
确定所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区,其中所述第一显示区为所述可折叠显示屏处于折叠态时的实际显示区域,所述第二显示区为所述可折叠显示屏处于展开态时的实际显示区域。
15.根据权利要求11或12所述的方法,其特征在于,所述电子设备包括第一显示屏和第二显示屏,所述第一显示区位于所述第一显示屏,所述第二显示区位于所述第二显示屏。
16.根据权利要求15所述的方法,其特征在于,在所述通过所述第二显示区显示第二图像之前,所述方法还包括:
检测到屏幕切换信息,所述屏幕切换信息用于指示所述电子设备上显示图像的显示屏由所述第一显示屏切换为所述第二显示屏;
确定所述电子设备的目标显示区由所述第一显示区切换为所述第二显示区,其中所述第一显示区为所述第一显示屏的实际显示区域,所述第二显示区为所述第二显示屏的实际显示区域。
17.根据权利要求11至16中任一项所述的方法,其特征在于,所述第一显示区的显示规格和/或所述第二显示区的显示规格为预先存储的,或者是根据所述电子设备上实际显示图像的区域的分辨率和/或宽高比确定的。
18.根据权利要求11至17中任一项所述的方法,其特征在于,在所述通过所述第二显示区显示第二图像之前,所述方法还包括:
根据所述第二显示区的显示规格,确定待显示区域,其中所述待显示区域的显示规格大于或等于所述第二显示区的显示规格;
根据所述待显示区域的显示规格对所述第二原始视频帧进行裁剪,得到所述第二图像,所述第二图像为所述待显示区域内的图像。
19.根据权利要求11至18中任一项所述的方法,其特征在于,所述第一原始视频帧与所述第二原始视频帧属于同一视频流,且所述第二原始视频是位于所述第一原始视频帧之后的帧。
20.一种电子设备,其特征在于,包括:
多个显示区,所述多个显示区中的至少两个显示区的显示规格不同;
一个或多个处理器;
一个或多个存储器;
所述一个或多个存储器存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行如权利要求1至19中任一项所述的方法。
21.一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1至19中任一项所述的方法。
CN202210244515.0A 2022-03-14 2022-03-14 图像显示方法和电子设备 Pending CN116795306A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210244515.0A CN116795306A (zh) 2022-03-14 2022-03-14 图像显示方法和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210244515.0A CN116795306A (zh) 2022-03-14 2022-03-14 图像显示方法和电子设备

Publications (1)

Publication Number Publication Date
CN116795306A true CN116795306A (zh) 2023-09-22

Family

ID=88046548

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210244515.0A Pending CN116795306A (zh) 2022-03-14 2022-03-14 图像显示方法和电子设备

Country Status (1)

Country Link
CN (1) CN116795306A (zh)

Similar Documents

Publication Publication Date Title
CN109917956B (zh) 一种控制屏幕显示的方法和电子设备
CN112714901B (zh) ***导航栏的显示控制方法、图形用户界面及电子设备
CN115866121B (zh) 应用界面交互方法、电子设备和计算机可读存储介质
CN112506386B (zh) 一种折叠屏显示方法及电子设备
CN113994317A (zh) 一种用户界面布局方法及电子设备
WO2020000448A1 (zh) 一种柔性屏幕的显示方法及终端
WO2021008589A1 (zh) 一种应用的运行方法及电子设备
CN110830645B (zh) 一种操作方法和电子设备及计算机存储介质
CN116048436B (zh) 应用界面显示方法、电子设备及存储介质
CN116723257A (zh) 一种图像显示方法及电子设备
CN115115679A (zh) 一种图像配准方法及相关设备
CN116795306A (zh) 图像显示方法和电子设备
CN115543276A (zh) 一种用于实现软件开发的方法、***以及电子设备
CN116719569B (zh) 启动应用的方法及装置
CN116684725B (zh) 应用界面的布局方法、装置、电子设备、存储介质及芯片
CN117459619B (zh) 折叠态的检测方法、可折叠电子设备
RU2781566C1 (ru) Способ управления отображением на экране и электронное устройство
CN116339569A (zh) 分屏显示的方法、折叠屏设备和计算机可读存储介质
CN117111796A (zh) 一种协同显示方法、设备及介质
CN117827070A (zh) 界面显示方法及电子设备
CN118276724A (zh) 一种显示方法以及电子设备
CN117687501A (zh) 横竖屏切换的显示方法及相关装置
CN118331464A (zh) 显示方法、显示装置和电子设备
CN118118734A (zh) 一种视频处理的方法以及电子设备
CN118276805A (zh) 应用界面显示方法、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination