CN110248004A - 终端、终端的控制方法及图像获取方法 - Google Patents

终端、终端的控制方法及图像获取方法 Download PDF

Info

Publication number
CN110248004A
CN110248004A CN201910556578.8A CN201910556578A CN110248004A CN 110248004 A CN110248004 A CN 110248004A CN 201910556578 A CN201910556578 A CN 201910556578A CN 110248004 A CN110248004 A CN 110248004A
Authority
CN
China
Prior art keywords
viewing area
imaging device
algorithm
terminal
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910556578.8A
Other languages
English (en)
Inventor
张学勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910556578.8A priority Critical patent/CN110248004A/zh
Publication of CN110248004A publication Critical patent/CN110248004A/zh
Priority to PCT/CN2020/096250 priority patent/WO2020259345A1/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0266Details of the structure or mounting of specific components for a display module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种终端。终端包括显示屏及成像装置,显示屏包括第一显示区及第二显示区;成像装置与第一显示区对应设置,成像装置用于接收穿过第一显示区的光信号以进行成像;成像装置进行成像时,第一显示区处于熄灭状态。本申请还公开了一种终端的控制方法及图像获取方法。成像装置与显示屏的第一显示区对应设置,成像装置接收穿过第一显示区的光信号以进行成像,不需要在显示屏上开设用于供光信号穿过的通孔,进而提高终端的屏占比。

Description

终端、终端的控制方法及图像获取方法
技术领域
本申请涉及消费性电子技术领域,更具体而言,涉及一种终端、终端的控制方法及图像获取方法。
背景技术
随着智能手机的快速发展,全面屏成为对手机的基本要求,提高屏占比,为消费者提供带来无边框大屏的视觉体验成为手机行业的发展的趋势。但是由于手机自拍这个需求,前置摄像头就需要摆放在前面,通常需要在屏幕上形成通孔以用于放置前置摄像头,然而,形成通孔导致手机的屏占比较低。
发明内容
本申请实施方式提供一种终端、终端的控制方法及图像获取方法。
本申请实施方式提供的一种终端包括显示屏及成像装置,所述显示屏包括第一显示区及第二显示区;所述成像装置与所述第一显示区对应设置,所述成像装置用于接收穿过所述第一显示区的光信号以进行成像;所述成像装置进行成像时,所述第一显示区处于熄灭状态。
本申请实施方式提供的另一种终端包括显示屏、成像装置及处理器,所述显示屏包括第一显示区及第二显示区;所述成像装置与所述第一显示区对应设置,所述成像装置用于接收穿过所述第一显示区的光信号以获取初始图像;所述处理器用于处理所述初始图像以获取最终图像。
在某些实施方式中,所述成像装置获取所述初始图像时,所述第一显示区处于熄灭状态,所述处理器用于通过第一算法校正所述初始图像以获取所述最终图像,所述第一算法与所述第一显示区的屏结构相关。
在某些实施方式中,所述第一算法的数量为多个,每个所述第一算法与一个成像场景对应,所述处理器还用于:获取与所述初始图像的成像场景对应的第一算法;及通过对应的所述第一算法校正所述初始图像以获取所述最终图像。
在某些实施方式中,在标定时,所述第一显示区处于熄灭状态,所述成像装置用于接收穿过所述第一显示区的光信号以获取测试图像,及接收未穿过所述第一显示区的光信号以获取参考图像;所述处理器用于依据所述测试图像及所述参考图像获取所述第一算法。
在某些实施方式中,所述第一算法包括亮度补偿算法、衍射光斑消除算法、补全算法及去雾算法中的一种或多种。
在某些实施方式中,所述成像装置获取所述初始图像时,所述第一显示区显示预设画面,所述处理器用于通过第二算法校正所述初始图像以获取所述最终图像,所述第二算法与所述第一显示区的屏结构及所述预设画面相关。
在某些实施方式中,所述显示屏包括能够被独立控制的第一子屏及第二子屏,所述第一显示区形成在所述第一子屏上,所述第二显示区形成在所述第二子屏上;或
所述显示屏为一个独立的屏结构,所述第一显示区及所述第二显示区能够被独立控制。
在某些实施方式中,所述第一显示区设置在所述显示屏的非角部区域。
在某些实施方式中,所述第一显示区设置在所述显示屏的至少一个边缘的中间位置。
在某些实施方式中,所述第一显示区的像素密度小于所述第二显示区的像素密度。
在某些实施方式中,所述成像装置未进行成像时,所述第一显示区与所述第二显示区均处于点亮状态。
本申请实施方式提供的终端的控制方法用于控制终端,所述终端包括显示屏及成像装置,所述显示屏包括第一显示区及第二显示区,所述成像装置与所述第一显示区对应设置;所述控制方法包括:控制所述第一显示区处于熄灭状态;及控制所述成像装置接收穿过所述第一显示区的光信号以进行成像。
本申请实施方式提供的一种图像获取方法用于终端,所述终端包括显示屏及成像装置,所述显示屏包括第一显示区及第二显示区,所述成像装置与所述第一显示区对应设置,所述图像获取方法包括:控制所述第一显示区处于熄灭状态;控制所述成像装置接收穿过所述第一显示区的光信号以获取初始图像;及通过第一算法校正所述初始图像以获取最终图像,所述第一算法与所述第一显示区的屏结构相关。
本申请实施方式提供的另一种图像获取方法用于终端,所述终端包括显示屏及成像装置,所述显示屏包括第一显示区及第二显示区,所述成像装置与所述第一显示区对应设置,所述图像获取方法包括:控制所述第一显示区显示预设画面;控制所述成像装置接收穿过所述第一显示区的光信号以获取初始图像;及通过第二算法校正所述初始图像以获取最终图像,所述第二算法与所述第一显示区的屏结构及所述预设画面相关。
本申请实施方式的终端、终端的控制方法及图像获取方法中,成像装置与显示屏的第一显示区对应设置,成像装置接收穿过第一显示区的光信号以进行成像,不需要在显示屏上开设用于供光信号穿过的通孔,进而提高终端的屏占比。
本申请的实施方式的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实施方式的实践了解到。
附图说明
本申请的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解,其中:
图1是本申请实施方式的终端的结构示意图;
图2是图1所示的终端沿II-II线的截面示意图;
图3及图4是本申请实施方式的终端的结构示意图;
图5是本申请实施方式的显示屏的结构示意图;
图6是本申请实施方式的终端的部分结构放大示意图;
图7是本申请实施方式的成像装置的传感器的结构示意图;
图8是本申请实施方式的终端的标定场景示意图;
图9是本申请实施方式的终端的控制方法的流程示意图;
图10及图11是本申请实施方式的图像获取方法的流程示意图。
主要元件符号说明:
终端100、机壳10、收容腔11、显示屏20、第一显示区21、第二显示区22、第一子屏23、第二子屏24、像素25、成像装置30、传感器31、感光单元311、成像单元312、盖板40、处理器50。
具体实施方式
以下结合附图对本申请的实施方式作进一步说明。附图中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。
另外,下面结合附图描述的本申请的实施方式是示例性的,仅用于解释本申请的实施方式,而不能理解为对本申请的限制。
在本申请中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触,或第一和第二特征通过中间媒介间接接触。而且,第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度小于第二特征。
请参阅图1及图2,本申请实施方式的终端100包括显示屏20及成像装置30。显示屏20包括第一显示区21及第二显示区22。成像装置30与第一显示区21对应设置,成像装置30用于接收穿过第一显示区21的光信号以进行成像。
上述终端100中,由于成像装置30与显示屏20的第一显示区21对应设置,成像装置30接收穿过第一显示区21的光信号以进行成像,不需要在显示屏20上开设用于供光信号穿过的通孔,进而提高终端100的屏占比。
具体地,请参阅1及图2,本申请实施方式的终端100包括机壳10、显示屏20、成像装置30及处理器50。终端100的具体形式可以是手机、游戏机、平板电脑、显示器、笔记本电脑、智能手表、头显设备等,本申请以终端100是手机为例进行说明,可以理解,终端100的具体形式并不限于手机,在此不作限制。
机壳10可以是终端100的外壳,例如是手机的中框及后盖。机壳10可以用于安装显示屏20、成像装置30、处理器50等功能器件,功能器件还可以包括主板、电源模块等。终端100还可包括盖板40,盖板40可以由玻璃、蓝宝石、树脂等透明的材料制成,盖板40上可以集成有触控感应层,以感应在盖板40上的触摸操作。盖板40与机壳10可以共同围成收容腔11,显示屏20、成像装置30及处理器50均可以收容在收容腔11内,以使显示屏20、成像装置30及处理器50不易受到水汽及灰尘等的侵蚀。
请继续参阅图1及图2,显示屏20安装在机壳10上,显示屏20可用于发出光信号,光信号穿过盖板40后进入终端100外部,以使显示屏20显示图片、视频、文字等画面。具体地,显示屏20可以安装在机壳10的一个面上,或者同时安装在机壳10的两个面上,例如同时在机壳10的正面及背面上安装显示屏20,或者同时安装在机壳10的两个以上个面上,例如同时在机壳10的正面、背面及侧面上安装显示屏20。在如图1所示的例子中,显示屏20安装在机壳10的正面,显示屏20可以覆盖该正面的面积的90%或以上,例如可以是91%、92%、93%、95%、97%,甚至是100%。显示屏20的整体形状可以是矩形、圆形、椭圆形、跑道形、圆角矩形、三角形等形状,在此不作限制。
显示屏20包括第一显示区21及第二显示区22。第一显示区21及第二显示区22的显示状态可以被独立控制,例如第一显示区21及第二显示区22的熄灭、点亮、显示内容、显示亮度、刷新频率等均可以被独立控制。其中,熄灭指显示区(第一显示区21或第二显示区22)处于不显示的状态,点亮指显示区(第一显示区21或第二显示区22)处于显示的状态。在一个例子中,第一显示区21与第二显示区22可以共同显示一帧连续的画面,例如第一显示区21与第二显示区22分别显示同一个物体的连续的两部分。在另一个例子中,第一显示区21与第二显示区22可以分别显示不同的画面,例如第二显示区22显示当前画面,第一显示区21显示该当前画面的缩略图,或者第一显示区21可用于显示终端100的电池电量、网络连接状态、***时间等状态图标。
请参阅图1、图3及图4,第一显示区21可以设置在显示屏20的非角部区域。其中,角部区域指显示屏20的两个边缘相交的部分区域。可以理解,终端100在摔落时,显示屏20的角部区域尤其容易破裂,如果将第一显示区21设置在角部区域,第一显示区21则容易受损,且与第一显示区21对应设置的成像装置30也容易发生移位或者损坏。而将第一显示区21设置在非角部区域可以一定程度上减小第一显示区21及成像装置30损坏的可能性。
具体地,第一显示区21可以设置在显示屏20的至少一个边缘的中间位置,以使用户在使用成像装置30进行自拍时,用户直视显示屏20时也能同时直视成像装置30,自拍的效果较佳。例如在如图1及图3所示的例子中,第一显示区21设置在显示屏20的上边缘的中间位置;在如图4所示的例子中,第一显示区21设置在显示屏20的下边缘的中间位置。当然,在其他例子中,第一显示区21还可以设置在显示屏20的左边缘、右边缘等的中间位置,或者同时设置在两个边缘(例如上边缘及下边缘)的中间位置上,在此不作限制。需要说明的是,本说明书的附图中,第一显示区21与第二显示区22的界线只是为了清楚说明二者之间的界限,并不代表在实际显示中会出现该界线。
第一显示区21及第二显示区22的形状可以依据需求进行设置,例如,第一显示区21可以是矩形、跑道形、水滴形、半圆形、圆形等任意形状,第二显示区22可以与第一显示区21互补形成上述的显示屏20的整体形状,例如,如图1所示,第二显示区22与第一显示区21互补形成圆角矩形的形状显示屏20。第一显示区21的面积可以设置得小于第二显示区22的面积,例如第一显示区21的面积为第二显示区22的面积的十分之一、二十分之一、二十五分之一等比例关系。
显示屏20的具体组成形式可以有不同的选择,在一个例子中,显示屏20为一个独立的屏结构,第一显示区21及第二显示区22能够被独立控制。此时,第一显示区21及第二显示区22为该独立的屏结构的不同的分区,第一显示区21与第二显示区22之间并没有明显的边界。显示屏20可以是OLED显示屏、Micro LED显示屏、或者是由可独立控制的点阵背光源(例如mini led或micro led)作为背光的液晶显示屏。
请参阅图5,在另一个例子中,显示屏20包括能够被独立控制的第一子屏23及第二子屏24,第一显示区21形成在第一子屏23上,第二显示区22形成在第二子屏24上。即,显示屏20由两个独立的子显示装置(第一子屏23及第二子屏24)组成。第一子屏23与第二子屏24在结合成显示屏20时,人眼难以察觉到第一子屏23与第二子屏24之间的交界线。第一子屏23与第二子屏24分别由不同的驱动电路驱动显示。第二子屏24可以形成缺口,缺口例如可以是跑道形、矩形、水滴形等形状,第一子屏23的形状可以与缺口的形状相同,以使第一子屏23与第二子屏24可以结合成较为规则的显示屏20。此时,第一子屏23与第二子屏24可以是同类型的显示装置,例如,第一子屏23与第二子屏24均为OLED显示屏、Micro LED显示屏、或液晶显示屏等任意形式的显示装置中的一种;第一子屏23与第二子屏24也可以是不同类型的显示装置,例如第一子屏23与第二子屏24可以分别是OLED显示屏、Micro LED显示屏、或液晶显示屏等任意形式的显示装置中的不同的两种显示装置,在此不作限制。
请参阅图1及图2,成像装置30安装在的机壳10内。成像装置30与第一显示区21对应设置,成像装置30用于接收穿过第一显示区21的光信号以进行成像。成像装置30与第一显示区21对应设置,可以是成像装置30的入光面朝向第一显示区21,光信号穿过第一显示区21后,可由成像装置30采集并用于成像,或者说,成像装置30设置于显示屏20下,并与第一显示区21对准。
具体地,成像装置30可以是用于依据穿过第一显示区21的可见光信号进行成像的成像装置30,例如成像装置30为彩色相机或黑白相机等;成像装置30还可以是用于依据穿过第一显示区21的不可见光信号进行成像的成像装置30,例如成像装置30为红外相机或紫外相机等;成像装置30还可以是深度相机中的接收装置,例如成像装置30为结构光深度相机中的光接收装置,或者为飞行时间(Time of flight,TOF)深度相机中的光接收装置,在此不作限制。本申请说明书以成像装置30接收可见光信号进行成像为例进行说明。
当显示屏20安装在机壳10的正面时,成像装置30可以是前置成像装置;当显示屏20安装在机壳10的背面时,成像装置30可以是后置成像装置;当然,当显示屏20同时安装在机壳10的正面及背面时,成像装置30可以包括前置成像装置及后置成像装置。本申请说明书以成像装置30为前置成像装置为例进行示例性说明。
成像装置30可以包括单个摄像头,单个摄像头与第一显示区21对准;成像装置30也可以包括两个摄像头,两个摄像头均与第一显示区21对准;成像装置30也可以包括三个摄像头,三个摄像头均与第一显示区21对准;当然,成像装置30还可以包括更多个摄像头,该更多个摄像头均与第一显示区21对准。
请结合图6,由于成像装置30用于成像的光信号需要穿过第一显示区21,而第一显示区21自身的屏结构可能会对光信号产生影响,例如第一显示区21内的像素25可能会使光信号产生衍射或者削弱光信号的强度等,而导致成像装置30所成的像与实际场景不符。因此,可以考虑通过设计显示屏20及成像装置30的结构来减少这一影响。
具体地,对于显示屏20,可以降低第一显示区21的像素25密度以减少对第一显示区21对光信号的作用,如图6所示,可以设置第一显示区21的像素25密度小于第二显示区22的像素25密度,例如第一显示区21的像素25密度为第二显示区22的像素25密度的三分之一、二分之一、四分之一等,使得第二显示区22的显示效果较佳,同时成像装置30接收穿过第一显示区21的光信号并用于成像的成像质量较佳。
用于连接第一显示区21的像素25的连接线可以尽可能地转移到第二显示区22内,或者转移到第一显示区21的未与成像面对准的区域内,以减少第一显示区21内的连接线对光信号的影响。同时,第一显示区21的组成部分的选材也可以选择透光率较高的材料,例如选择透明的材料(如ITO)制成像素25的连接线;如果第一显示区21有偏光片,还可选择透明的材料制成偏光片。
对于成像装置30,请结合图7,成像装置30可以选择灵敏度更高的传感器31,在一个例子中,可以增大传感器31的感光单元311的尺寸,例如采用长(L)×宽(h)为1微米×1微米的感光单元311,相较于采用长×宽为0.8微米×0.8微米的感光单元,可以增加每个感光单元311可以接收的光信号的量,得到较佳的成像质量。在一个例子中,在能够满足成像分辨率的情况下,可以将传感器31中的多个感光单元311合并为一个成像单元312使用,该一个成像单元312内的多个感光单元311合计接收的光信号的量用于反映最终成像的单个像素的像素值。一个成像单元312内的感光单元311的数量可以是两个、四个、八个、十六个等任意数量。另外,还可以采用具有更大光圈镜头的成像装置30,以最大限度增加进光量,例如可以采用F2.0、F1.8或更大的光圈。
成像装置30还可与第一显示区21共同配合以减少第一显示区21对光信号的影响。在一个例子中,在成像装置30进行成像时,第一显示区21处于熄灭状态。第一显示区21处于熄灭状态时,第一显示区21不会主动向外发射光信号,避免第一显示区21发出的光信号直接进入成像装置30而影响成像。具体地,当终端100的处理器50接收到用户的开启成像装置30的指令时,处理器50控制第一显示区21熄灭,同时打开成像装置30,使得成像装置30接收穿过第一显示区21的光信号以进行成像。此时,第二显示区22可以正常显示,例如可以用于显示成像装置30获取的预览画面。当成像装置30使用完毕后,即,成像装置30未进行成像时,第一显示区21与第二显示区22可以均处于点亮状态,具体可以由处理器50控制第一显示区21与第二显示区22共同点亮,以显示较完整的画面,提高用户的使用体验。
在另一个例子中,在成像装置30进行成像时,第一显示区21显示预设画面。具体地,当终端100的处理器50接收到用户的开启成像装置30的指纹时,处理器50控制第一显示区21显示预设画面,同时打开成像装置30,使得成像装置30接收穿过第一显示区21的光信号以进行成像。其中,预设画面可以是固定的画面,以使预设画面对成像的影响较固定,后期容易对所成的像进行校正。预设画面可以是终端100的出厂设置之一,例如预设画面为笑脸、茄子等图案,以辅助用户进行自拍,预设画面还可以是当前的成像参数、或者用于设置成像参数的功能图标等画面。
此时,第二显示区22可以正常显示,例如可以用于显示成像装置30获取的预览画面。当成像装置30使用完毕后,即,成像装置30未进行成像时,第一显示区21与第二显示区22可以均处于点亮状态,具体可以由处理器50控制第一显示区21与第二显示区22共同点亮,以显示较完整的画面,提高用户的使用体验。
请参阅图1及图2,处理器50可以成像装置30及显示屏20均连接。处理器50可用于控制成像装置30及显示屏20的使用状态。另外,处理器50还可用于处理成像装置30所成的像。
如上所述,成像装置30可以用于接收穿过第一显示区21的光信号以进行成像,可以将成像装置30获取的未经处理器50处理的图像称为初始图像。处理器50可以用于处理初始图像以获取最终图像。
由于第一显示区21的屏结构的作用,和/或第一显示区21的显示的预设画面的作用,导致初始图像可能会有亮度偏暗、清晰度较低、图像发雾、光斑(flare)、鬼影(ghost)等缺陷。处理器50再进一步处理初始图像后,可获得质量更高的最终图像。最终图像可以用于最终呈现给用户或进行保存。
一个实施方式中,对于成像装置30获取初始图像时,第一显示区21处于熄灭状态的方式,处理器50可以通过第一算法校正初始图像以获取最终图像,第一算法与第一显示区21的屏结构相关。由于成像装置30获取初始图像时,第一显示区21处于熄灭状态,故通过与第一显示区21的屏结构相关的第一算法对初始图像进行校正,则可以得到质量较好的最终图像。具体地,第一算法可以包括亮度补偿算法、衍射光斑消除算法、补全算法及去雾算法中的一种或多种,以分别实现对初始图像的亮度补偿、消除初始图像的衍射光斑、补全初始图像中的缺失、去除初始图像中被雾化的部分等功能。
第一算法的数量可以有多个,每个第一算法与一个成像场景对应。处理器50在校正初始图像时,还用于获取与初始图像的成像场景对应的第一算法,及通过对应的第一算法校正初始图像以获取最终图像。不同的成像场景的光信号的强弱、分布情况等性质均不同,因此,针对不同的成像场景,使用对应的第一算法可以对初始图像进行更有针对性的处理。具体地,例如,对于成像场景为暗光场景,对应的第一算法可以更侧重于对初始图像进行亮度补偿;对于成像场景为背光场景,对应的第一算法可以更侧重于对初始图像进行衍射光斑的消除等。
第一算法可以通过标定得到,具体地,请结合图8,如图8a,在第一显示区21处于熄灭状态时,成像装置30接收穿过第一显示区21的光信号以获取测试图像P1,如图8b成像装置30接收未穿过第一显示区21的光信号以获取参考图像P2。处理器50用于依据测试图像P1及参考图像P2获取第一算法。其中,测试图像P1及参考图像P2均是同一个成像装置30对同一个场景进行成像,而由于用于获取测试图像P1的光信号穿过了第一显示区21,用于获取参考图像P2的光信号未穿过第一显示区21,因此,参考图像P2与测试图像P1的细节不同,而参考图像P2更能够体现成像场景的客观情况,例如同一个光源在测试图像P1中为光源200a,在参考图像P2中为光源200b,光源200b的清晰度高于光源200a的清晰度。处理器50将通过人工智能(Artificial Intelligence,AI)深度学习的方式比较测试图像P1及参考图像P2,并得出第一算法。在标定时,成像装置30需要对多个(例如一万个、十万个、百万个等)不同的场景获取测试图像及参考图像,处理器50获取与多个不同的场景一一对应的多个第一算法,以在实际使用中,依据当前的成像场景采用对应的第一算法。
另一个实施方式中,对于成像装置30获取初始图像时,第一显示区21显示预设画面的方式,处理器50可以通过第二算法校正初始图像以获取最终图像,第二算法与第一显示区21的屏结构及预设画面相关。由于成像装置30获取初始图像时,第一显示区21显示预设画面,故通过与第一显示区21的屏结构及预设画面相关的第二算法对初始图像校正,则可以得到质量较好的最终图像。具体地,第二算法可以包括亮度补偿算法、衍射光斑消除算法、补全算法及去雾算法中的一种或多种,以分别实现对初始图像的亮度补偿、消除初始图像的衍射光斑、补全初始图像中的缺失、去除初始图像中被雾化的部分等功能。
第二算法的数量可以有多个,每个第二算法与一个成像场景对应。处理器50在校正初始图像时,还用于获取与初始图像的成像场景对应的第二算法,及通过对应的第二算法校正初始图像以获取最终图像。不同的成像场景的光信号的强弱、分布情况等性质均不同,因此,针对不同的成像场景,使用对应的第二算法可以对初始图像进行更有针对性的处理。具体地,例如,对于成像场景为暗光场景,对应的第二算法可以更侧重于对初始图像进行亮度补偿;对于成像场景为背光场景,对应的第二算法可以更侧重于对初始图像进行衍射光斑的消除等。
第二算法可以通过标定得到,具体地,请结合图8,如图8a,在第一显示区21处于熄灭状态时,成像装置30接收穿过第一显示区21的光信号以获取测试图像P1,如图8b成像装置30接收未穿过第一显示区21的光信号以获取参考图像P2。处理器50用于依据测试图像P1及参考图像P2获取第二算法。其中,测试图像P1及参考图像P2均是同一个成像装置30对同一个场景进行成像,而由于用于获取测试图像P1的光信号穿过了第一显示区21,用于获取参考图像P2的光信号未穿过第一显示区21,因此,参考图像P2与测试图像P1的细节不同,而参考图像P2更能够体现成像场景的客观情况,例如同一个光源在测试图像P1中为光源200a,在参考图像P2中为光源200b,光源200b的清晰度高于光源200a的清晰度。处理器50将通过人工智能深度学习的方式比较测试图像P1及参考图像P2,并得出第二算法。在标定时,成像装置30需要对多个(例如一万个、十万个、百万个等)不同的场景进行获取测试图像及参考图像,处理器50获取与多个不同的场景一一对应的多个第二算法,以在实际使用中,依据当前的成像场景采用对应的第二算法。
请结合图9,本申请实施方式的终端100的控制方法可用于控制本申请实施方式的终端100,控制方法包括步骤:
091:控制第一显示区21处于熄灭状态;及
092:控制成像装置30接收穿过第一显示区21的光信号以进行成像。
步骤091及步骤092可以由处理器50实施,具体的实施细节,可以参考上述对终端100的描述,在此不再赘述。
请结合图10,本申请实施方式的图像获取方法可用于本申请实施方式的终端100,图像获取方法包括步骤:
0101:控制第一显示区21处于熄灭状态;
0102:控制成像装置30接收穿过第一显示区21的光信号以获取初始图像;及
0103:通过第一算法校正初始图像以获取最终图像。
步骤0101、步骤0102及步骤0103可以由处理器50实施,具体的实施细节,可以参考上述对终端100的描述,在此不再赘述。
请结合图11,本申请实施方式的图像获取方法可用于本申请实施方式的终端100,图像获取方法包括步骤:
0111:控制第一显示区21显示预设画面;
0112:控制成像装置30接收穿过第一显示区21的光信号以获取初始图像;及
0113:通过第二算法校正初始图像以获取最终图像。
步骤0111、步骤0112及步骤0113可以由处理器50实施,具体的实施细节,可以参考上述对终端100的描述,在此不再赘述。
综上,本申请实施方式的终端100、终端100的控制方法及图像获取方法中,成像装置30与显示屏20的第一显示区21对应设置,成像装置30接收穿过第一显示区31的光信号以进行成像,不需要在显示屏20上开设用于供光信号穿过的通孔,进而提高终端100的屏占比。
在本说明书的描述中,参考术语“某些实施方式”、“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”、或“一些示例”的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个所述特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个,除非另有明确具体的限定。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型,本申请的范围由权利要求及其等同物限定。

Claims (15)

1.一种终端,其特征在于,包括:
显示屏,所述显示屏包括第一显示区及第二显示区;及
成像装置,所述成像装置与所述第一显示区对应设置,所述成像装置用于接收穿过所述第一显示区的光信号以进行成像;
所述成像装置进行成像时,所述第一显示区处于熄灭状态。
2.一种终端,其特征在于,包括:
显示屏,所述显示屏包括第一显示区及第二显示区;
成像装置,所述成像装置与所述第一显示区对应设置,所述成像装置用于接收穿过所述第一显示区的光信号以获取初始图像;及
处理器,所述处理器用于处理所述初始图像以获取最终图像。
3.根据权利要求2所述的终端,其特征在于,所述成像装置获取所述初始图像时,所述第一显示区处于熄灭状态,所述处理器用于通过第一算法校正所述初始图像以获取所述最终图像,所述第一算法与所述第一显示区的屏结构相关。
4.根据权利要求3所述的终端,其特征在于,所述第一算法的数量为多个,每个所述第一算法与一个成像场景对应,所述处理器还用于:
获取与所述初始图像的成像场景对应的第一算法;及
通过对应的所述第一算法校正所述初始图像以获取所述最终图像。
5.根据权利要求3所述的终端,其特征在于,在标定时,所述第一显示区处于熄灭状态,所述成像装置用于接收穿过所述第一显示区的光信号以获取测试图像,及接收未穿过所述第一显示区的光信号以获取参考图像;
所述处理器用于依据所述测试图像及所述参考图像获取所述第一算法。
6.根据权利要求3所述的终端,其特征在于,所述第一算法包括亮度补偿算法、衍射光斑消除算法、补全算法及去雾算法中的一种或多种。
7.根据权利要求2所述的终端,其特征在于,所述成像装置获取所述初始图像时,所述第一显示区显示预设画面,所述处理器用于通过第二算法校正所述初始图像以获取所述最终图像,所述第二算法与所述第一显示区的屏结构及所述预设画面相关。
8.根据权利要求1至7任意一项所述的终端,其特征在于,所述显示屏包括能够被独立控制的第一子屏及第二子屏,所述第一显示区形成在所述第一子屏上,所述第二显示区形成在所述第二子屏上;或
所述显示屏为一个独立的屏结构,所述第一显示区及所述第二显示区能够被独立控制。
9.根据权利要求1至7任意一项所述的终端,其特征在于,所述第一显示区设置在所述显示屏的非角部区域。
10.根据权利要求1至7任意一项所述的终端,其特征在于,所述第一显示区设置在所述显示屏的至少一个边缘的中间位置。
11.根据权利要求1至7任意一项所述的终端,其特征在于,所述第一显示区的像素密度小于所述第二显示区的像素密度。
12.根据权利要求1至7任意一项所述的终端,其特征在于,所述成像装置未进行成像时,所述第一显示区与所述第二显示区均处于点亮状态。
13.一种终端的控制方法,其特征在于,所述终端包括显示屏及成像装置,所述显示屏包括第一显示区及第二显示区,所述成像装置与所述第一显示区对应设置;所述控制方法包括:
控制所述第一显示区处于熄灭状态;及
控制所述成像装置接收穿过所述第一显示区的光信号以进行成像。
14.一种图像获取方法,用于终端,其特征在于,所述终端包括显示屏及成像装置,所述显示屏包括第一显示区及第二显示区,所述成像装置与所述第一显示区对应设置,所述图像获取方法包括:
控制所述第一显示区处于熄灭状态;
控制所述成像装置接收穿过所述第一显示区的光信号以获取初始图像;及
通过第一算法校正所述初始图像以获取最终图像,所述第一算法与所述第一显示区的屏结构相关。
15.一种图像获取方法,用于终端,其特征在于,所述终端包括显示屏及成像装置,所述显示屏包括第一显示区及第二显示区,所述成像装置与所述第一显示区对应设置,所述图像获取方法包括:
控制所述第一显示区显示预设画面;
控制所述成像装置接收穿过所述第一显示区的光信号以获取初始图像;及
通过第二算法校正所述初始图像以获取最终图像,所述第二算法与所述第一显示区的屏结构及所述预设画面相关。
CN201910556578.8A 2019-06-25 2019-06-25 终端、终端的控制方法及图像获取方法 Pending CN110248004A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910556578.8A CN110248004A (zh) 2019-06-25 2019-06-25 终端、终端的控制方法及图像获取方法
PCT/CN2020/096250 WO2020259345A1 (zh) 2019-06-25 2020-06-16 终端、终端的控制方法及图像获取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910556578.8A CN110248004A (zh) 2019-06-25 2019-06-25 终端、终端的控制方法及图像获取方法

Publications (1)

Publication Number Publication Date
CN110248004A true CN110248004A (zh) 2019-09-17

Family

ID=67889542

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910556578.8A Pending CN110248004A (zh) 2019-06-25 2019-06-25 终端、终端的控制方法及图像获取方法

Country Status (2)

Country Link
CN (1) CN110248004A (zh)
WO (1) WO2020259345A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111383597A (zh) * 2020-03-25 2020-07-07 武汉华星光电半导体显示技术有限公司 一种像素电路和全面屏显示设备
CN111627369A (zh) * 2020-05-14 2020-09-04 Oppo广东移动通信有限公司 显示屏的显示方法、显示屏、显示屏组件以及电子设备
WO2020259345A1 (zh) * 2019-06-25 2020-12-30 Oppo广东移动通信有限公司 终端、终端的控制方法及图像获取方法
CN112331309A (zh) * 2020-10-29 2021-02-05 武汉联影医疗科技有限公司 医学影像阅片装置和医学影像阅片***
CN112581874A (zh) * 2019-09-29 2021-03-30 北京小米移动软件有限公司 显示面板、显示装置、显示控制方法、装置及终端设备
WO2021258300A1 (zh) * 2020-06-23 2021-12-30 Oppo广东移动通信有限公司 一种屏下拍摄控制方法、终端设备及存储介质
CN114092348A (zh) * 2021-11-18 2022-02-25 大连海事大学 一种基于衍射光学多通道神经网络的图像去雾方法与***

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050264689A1 (en) * 2004-05-26 2005-12-01 Yang Shou A Display panel having a video camera
EP2330819A2 (en) * 2009-11-02 2011-06-08 Sony Corporation Image display device with imaging unit
CN102411878A (zh) * 2010-09-21 2012-04-11 索尼爱立信移动通信日本株式会社 带传感器的显示设备和电子设备
CN106603772A (zh) * 2017-01-26 2017-04-26 广东欧珀移动通信有限公司 电子装置及图像获取方法
CN107784989A (zh) * 2017-10-27 2018-03-09 信利光电股份有限公司 一种带摄像模组的液晶显示装置
CN108366186A (zh) * 2018-02-09 2018-08-03 广东欧珀移动通信有限公司 电子装置、显示屏及拍照控制方法
CN109451108A (zh) * 2018-11-16 2019-03-08 Oppo广东移动通信有限公司 电子装置、电子装置的控制方法及控制装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106921767A (zh) * 2017-03-07 2017-07-04 捷开通讯(深圳)有限公司 一种高屏占比的移动终端
CN107580092A (zh) * 2017-10-17 2018-01-12 黄河科技学院 具有透明屏幕下摄像头的全面屏手机及其操作方法
CN108984139A (zh) * 2018-06-22 2018-12-11 昆山国显光电有限公司 显示模组、终端和终端的控制方法
CN108900676A (zh) * 2018-08-13 2018-11-27 华南理工大学 一种全面屏手机及实现全面屏显示的方法
CN110248004A (zh) * 2019-06-25 2019-09-17 Oppo广东移动通信有限公司 终端、终端的控制方法及图像获取方法
CN111049973B (zh) * 2019-11-22 2021-06-01 维沃移动通信有限公司 一种屏幕显示的控制方法、电子设备及计算机可读存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050264689A1 (en) * 2004-05-26 2005-12-01 Yang Shou A Display panel having a video camera
EP2330819A2 (en) * 2009-11-02 2011-06-08 Sony Corporation Image display device with imaging unit
CN102411878A (zh) * 2010-09-21 2012-04-11 索尼爱立信移动通信日本株式会社 带传感器的显示设备和电子设备
CN106603772A (zh) * 2017-01-26 2017-04-26 广东欧珀移动通信有限公司 电子装置及图像获取方法
CN107784989A (zh) * 2017-10-27 2018-03-09 信利光电股份有限公司 一种带摄像模组的液晶显示装置
CN108366186A (zh) * 2018-02-09 2018-08-03 广东欧珀移动通信有限公司 电子装置、显示屏及拍照控制方法
CN109451108A (zh) * 2018-11-16 2019-03-08 Oppo广东移动通信有限公司 电子装置、电子装置的控制方法及控制装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020259345A1 (zh) * 2019-06-25 2020-12-30 Oppo广东移动通信有限公司 终端、终端的控制方法及图像获取方法
CN112581874A (zh) * 2019-09-29 2021-03-30 北京小米移动软件有限公司 显示面板、显示装置、显示控制方法、装置及终端设备
CN111383597A (zh) * 2020-03-25 2020-07-07 武汉华星光电半导体显示技术有限公司 一种像素电路和全面屏显示设备
CN111383597B (zh) * 2020-03-25 2021-07-06 武汉华星光电半导体显示技术有限公司 一种像素电路和全面屏显示设备
CN111627369A (zh) * 2020-05-14 2020-09-04 Oppo广东移动通信有限公司 显示屏的显示方法、显示屏、显示屏组件以及电子设备
WO2021258300A1 (zh) * 2020-06-23 2021-12-30 Oppo广东移动通信有限公司 一种屏下拍摄控制方法、终端设备及存储介质
CN112331309A (zh) * 2020-10-29 2021-02-05 武汉联影医疗科技有限公司 医学影像阅片装置和医学影像阅片***
CN114092348A (zh) * 2021-11-18 2022-02-25 大连海事大学 一种基于衍射光学多通道神经网络的图像去雾方法与***
CN114092348B (zh) * 2021-11-18 2024-04-05 大连海事大学 一种基于衍射光学多通道神经网络的图像去雾方法与***

Also Published As

Publication number Publication date
WO2020259345A1 (zh) 2020-12-30

Similar Documents

Publication Publication Date Title
CN110248004A (zh) 终端、终端的控制方法及图像获取方法
CN112639579B (zh) 用于增强现实装置的空间分辨的动态调暗
US9710887B1 (en) Display apparatus and method of displaying using context display and projectors
US9711114B1 (en) Display apparatus and method of displaying using projectors
US20170208312A1 (en) Apparatus and method for a dynamic "region of interest" in a display system
US9158114B2 (en) Image display utilizing a variable mask to selectively block image data
US20100073544A1 (en) Image display device, image-capturing device, and program
CN106233187A (zh) 具有调光面板的显示设备
US20230324744A1 (en) Geometries for mitigating artifacts in see-through pixel arrays
US9549173B2 (en) Display device
CN102760387B (zh) 显示面板、显示装置和电子设备
CN109286704A (zh) 电子设备
CN106802489B (zh) 一种裸眼立体显示器
CN111077671B (zh) 设备控制方法、装置、显示设备及存储介质
JP2017191293A (ja) 覗き見防止システム
CN108345108A (zh) 头戴式显示设备、三维图像信息的生成方法及装置
WO2019051228A1 (en) TRANSPARENT DISPLAY BASED ON A CAMERA
CN109997067A (zh) 使用便携式电子设备的显示装置和方法
CN109143575A (zh) 可穿戴设备、防窥显示***及防窥显示方法
US20230421883A1 (en) Reducing imaging stray light crosstalk of camera under lcd screene
CN112243117B (zh) 图像处理装置、方法及摄像机
CN205562961U (zh) 一种画面显示装置及一种头戴设备
EP3330773B1 (en) Display apparatus and method of displaying using context display and projectors
CN110234004A (zh) 显示装置、显示方法以及记录介质
CN113888958B (zh) 光学显示装置、光学显示控制方法及显示器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190917

RJ01 Rejection of invention patent application after publication