CN105611185A - 图像生成方法、装置及终端设备 - Google Patents

图像生成方法、装置及终端设备 Download PDF

Info

Publication number
CN105611185A
CN105611185A CN201510965025.XA CN201510965025A CN105611185A CN 105611185 A CN105611185 A CN 105611185A CN 201510965025 A CN201510965025 A CN 201510965025A CN 105611185 A CN105611185 A CN 105611185A
Authority
CN
China
Prior art keywords
pixel
merging
current brightness
photosensitive
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510965025.XA
Other languages
English (en)
Other versions
CN105611185B (zh
Inventor
***
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201510965025.XA priority Critical patent/CN105611185B/zh
Publication of CN105611185A publication Critical patent/CN105611185A/zh
Application granted granted Critical
Publication of CN105611185B publication Critical patent/CN105611185B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明提出一种图像生成方法、装置及终端设备,其中,预先提供的图像传感器包括:感光像素阵列,以及设置在所述感光像素阵列上的滤光片,其中,所述滤光片包括滤光单元阵列,每个滤光单元覆盖m*n个感光像素并构成合并像素,其中,m*n>1;通过检测拍照环境的当前亮度是否达到预设要求;若没有,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,提高图像的清晰度。

Description

图像生成方法、装置及终端设备
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像生成方法、装置及终端设备。
背景技术
随着智能终端的发展,终端设备越来越多,例如:手机、IPAD、穿戴智能设备等。
拍照包含了很多微小的元器件,其中,图像传感器是决定成像质量的一个关键因素。然而,拍照环境的光线实时都在变化,现有的图像传感器在低光照度环境生成的图像存在过多的影像噪点,导致图像不清晰等不足。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本发明的第一个目的在于提出一种图像生成方法,该方法实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
本发明的第二个目的在于提出一种图像生成装置。
本发明的第三个目的在于提出一种终端设备。
为达上述目的,本发明第一方面实施例提出了一种图像生成方法,包括:预先提供的图像传感器包括:感光像素阵列,以及设置在所述感光像素阵列上的滤光片,其中,所述滤光片包括滤光单元阵列,每个滤光单元覆盖m*n个感光像素并构成合并像素,其中,m*n>1;所述方法包括以下步骤:
检测拍照环境的当前亮度是否达到预设要求;若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
本发明实施例的图像生成方法,通过检测拍照环境的当前亮度是否达到预设要求;若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
为达上述目的,本发明第二方面实施例提出了一种图像生成装置,包括:图像传感器和图像处理器,其中,
所述图像传感器包括:感光像素阵列,以及设置在所述感光像素阵列上的滤光片,其中,所述滤光片包括滤光单元阵列,每个滤光单元覆盖m*n个感光像素并构成合并像素,其中,m*n>1;
所述图像处理器包括:检测模块,用于检测拍照环境是否达到预设亮度;处理模块,用于若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
本发明实施例的图像生成装置,通过检测拍照环境的当前亮度是否达到预设要求;若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
为达上述目的,本发明第三方面实施例提出了一种终端设备,包括如上所述的图像生成装置。
本发明实施例的终端设备,通过检测拍照环境的当前亮度是否达到预设要求;若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明实施例提供的图像传感器的立体结构示意图;
图2是本发明一个实施例的图像生成方法的流程图;
图3是本发明提供的图像传感器中的滤光单元阵列示意图;
图4是本发明另一个实施例的图像生成方法的流程图;
图5是本发明另一个实施例的图像生成方法的流程图;
图6是本发明一个实施例的图像生成装置的结构示意图;
图7是本发明另一个实施例的图像生成装置的结构示意图;
图8是本发明一个实施例的终端设备的结构示意图;
图9是本发明另一个实施例的终端设备的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
下面参考附图描述本发明实施例的图像生成方法、装置及终端设备。
具体地,本实施例提供的图像生成方法被配置在具有图像传感器的终端设备中进行具体说明。需要注意的是,终端设备的类型很多,例如:手机、IPAD、智能穿戴设备等。
图1是本发明实施例提供的图像传感器的立体结构示意图。
预先在终端设备中设置图像传感器1,其中,图像传感器1可以是CCD或者CMOS传感器。
参见图1,图像传感器1包括:感光像素阵列11,以及设置在所述感光像素阵列11上的滤光片,其中,所述滤光片包括滤光单元阵列12,每个滤光单元121覆盖m*n个感光像素111并构成合并像素,其中,m*n>1。
基于图1提供的图像传感器,实施本发明提供的图像生成方法。
图2是本发明一个实施例的图像生成方法的流程图。
如图2所示,该图像生成方法包括以下步骤:
步骤101,检测拍照环境的当前亮度是否达到预设要求。
具体地,环境亮度是影响图像传感器成像质量的一个关键因素。由于拍照环境的光亮情况是实时变化的,当拍照环境的光亮度过低时,生成的图像存在过多的影像噪点,使得图像不清晰。
为了根据拍照环境的实时光亮情况调整输出图像的像素,以提高成像质量,在拍照时,需要检测拍照环境的光亮情况。
需要说明的是,可以根据具体的应用场景通过多种方式检测拍照环境的当前亮度是否达到预设要求。例如:
第一种示例:可以通过具体的测光仪器检测拍照环境的当前亮度是否达到预设要求。其中,测光仪器可以根据具体应用需要进行选择,本实施例对此不作限制。或者,
第二种示例:可以获取拍照环境的感光信息,根据感光信息检测拍照环境的当前亮度是否达到预设要求。
其中,感光信息的具体内容很多,例如:感光度值即ISO值,或者,镜头的自动曝光值(AutomaticExposure,AE)。因此,可以根据应用场景通过不同的感光元件获取拍照环境的感光信息,本实施例对此不作限制。例如:
当用户在进行自拍时,可以通过获取人脸的自动曝光值AE,根据人脸的自动曝光值AE的大小检测拍照环境的当前亮度是否达到预设要求。或者;
当用户在夜景模式下拍照时,可以通过获取感光度值ISO值,根据感光度值ISO值的大小检测拍照环境的当前亮度是否达到预设要求。
需要说明的是,以上检测方式仅为举例说明,可以根据需要选择合适的处理方式检测拍照环境的当前亮度是否达到预设要求。
由于不同的检测方式对应不同的检测对象和检测原理,因此,采用不同的判断标准确定拍照环境的光亮情况。举例如下:
第一种示例:根据摄像头的曝光值AE判断拍照环境的光亮情况。如果AE大于等于阈值,则判断拍照环境的当前亮度没有达到预设要求,也就是暗光环境;
或者
第二种示例:根据感光度值ISO值来判断拍照环境的光亮情况。如果ISO值小于阈值,则判断拍照环境的当前亮度没有达到预设亮度,也就是暗光环境。
需要说明的是,以上情况仅是举例说明,可以根据实际应用情况选择或者调整具体的检测方式。
步骤102,若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值。
步骤103,根据所有的合并像素值生成对应像素的图像。
具体地,当检测获知拍照环境的当前亮度没有达到了预设的要求,也就是说,参见图1,图像传感器1的感光像素阵列11中每个感光像素111的进光量较小,感光程度较差,影像噪点较多,导致输出的图像非常不清楚。
因此,需要对合并像素中的多个感光像素的输出进行合并获取合并像素值,进而调整生成图像的像素,每个合并像素值的进光量大大高于单个感光像素,弥补单个感光像素进光量不足的缺陷,对噪声进行抑制。从而通过牺牲像素提高进光量,进而提高输出图像的清晰度。
为了更加清楚的描述如何对合并像素中多个感光像素的输出进行合并,结合图3具体说明如下:
图3是本发明提供的图像传感器中的滤光单元阵列示意图。
参见图1和图3,以每个滤光单元121覆盖2*2个感光像素111为例进行说明:
将归属于同一颜色的滤光单元121覆盖的2*2个个感光像素的输出相加,该2*2个个像素单元看作一个单色像素。由于光照的微小差异,每个感光像素111所对应的输出也可能不同,因此合并像素的输出综合了其2*2个感光像素111的输出,相比于单个感光像素,大大提高了进光量,进而根据合并像素值生成图像的像素,为全尺寸像素的图像的1/4。
例如:如果图像传感器的感光像素阵列为16M,即图像的全尺寸像素为16M。每个滤光单元121覆盖的2*2个感光像素111并构成的合并像素,将每个合并像素中的4个感光像素的输出相加读取合并像素值,生成的图像的像素为4M,分辨率也减小到全尺寸分辨率的1/4。
如上所述,当拍照环境的当前亮度没有达到预设要求时,通过对合并像素中多个感光像素的输出进行合并,虽然减小了输出图像的像素,细节表现的颗粒度稍差,但是可以增加每个像素点的进光量,提高感光程度,抑制影响噪声,提高图像的清晰度。其具体原理如下:
假定原有每个感光像素的输出为S,噪声为N,合并像素包括m个感光像素,则合并像素的合并像素值为n*m*S,而合并像素的噪声为m*N,在n=2,m=2的情况下,合成像素的噪声即为n*m*N/2左右。因此合并图像的亮度在低亮度环境下得到提升,抑制了影响噪声,图像的信噪比提高。
需要注意的是,除了2*2结构外,还有3*3,4*4,甚至是任意n*m结构(n,m为自然数,n*m大于1),可以理解,感光像素阵列11上可排列的感光像素111的数目是有限的。如,若感光像素阵列11的合并像素值为16M,采用2*2的合并像素结构会得到4M像素的合并图像,而采用4*4结构就只能得到1M像素的合并图像。因此2*2的合并像素结构是一个较佳排列方式,在尽量少牺牲像素的前提下提升图像亮度及清晰度。
综上所述,当拍照环境的当前亮度没有达到预设要求时,通过将同一所述合并像素中多个感光像素的输出相加获取合并像素值,根据有的合并像素值输出对应像素的图像,可以大大提高进光量,显著降低影像噪音,提高信噪比和清晰度。
进一步地,为了提高数据处理效率,预先在终端设备中设置寄存器,采用2*2的合并像素结构为例,说明如何提高合并像素值的获取效率,具体包括以下步骤:
采集所述感光像素阵列中第k行及第k+1行的输出并存入所述寄存器,其中k=2n-1,n为自然数,k+1小于等于所述感光像素阵列的总行数;及
从所述寄存器中提取所述第k行及第k+1行的输出,将所述合并像素中多个感光像素的输出相加获取合并像素值。
具体来说,首先采集感光像素阵列11中的第一行及第二行的感光像素111的输出并存入寄存器。例如:将如图2所示的位置坐标为1-1、1-2、2-1、2-2的四个感光像素111的输出相加获取合并像素值,其中位置坐标的左边数字代表行,右边数字代表列。
以此类推,直至处理完第一行及第二行的最后一组四个感光像素111。
按以上处理方式,依次采集感光像素阵列11中实时曝光完成的第k行及第k+1行的感光像素111的输出并存入寄存器,其中k=2n-1,n为自然数,k+1小于等于感光像素阵列11的总行数。直至感光像素阵列11中全部感光像素111的输出均处理完成。
从所述寄存器中提取所述第k行及第k+1行的输出,将同一合并像素中多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
由此可见,可以充分利用寄存器来实现感光像素阵列的输出读出、缓存及合并的过程,提高图像处理效率。
本实施例的图像生成方法,通过检测拍照环境的当前亮度是否达到预设要求;若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值;根据所有的合并像素值生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
基于上述实施例,为了更进一步地提高图像质量,针对步骤102的实施还可以包括如下步骤:
根据所述当前亮度确定每个合并像素中需要合并的像素数量P,其中,P<=m*n;
将属于同一所述合并像素中的P个感光像素的输出相加获取合并像素值。
具体地,如果拍照环境的当前亮度没有达到预设要求,需要对合并像素中的多个感光像素的输出进行合并。如果当前亮度越低,需要合并的感光像素越多,越需要提高进光量,如果当前亮度一般,需要合并的感光像素也可以适中,稍微提高进光量即可。因此,针对每个合并像素覆盖m*n个感光像素,可以根据当前亮度确定每个合并像素中需要合并的像素数量P,其中,P<=m*n。
进而,将属于同一所述合并像素中的P个感光像素的输出相加获取合并像素值。
基于上述实施例,进一步地,图像生成方法还包括如下步骤:
若确定所述当前亮度达到预设要求,则根据所述感光像素阵列的输出生成全尺寸像素的图像。
具体地,当检测获知拍照环境的当前亮度达到了预设要求,说明拍照时光亮情况较好。也就是说,参见图1,图像传感器1的感光像素阵列11中每个感光像素111的进光量较大,感光程度较好,输出的图像非常清晰。因此,不用对合并像素中每个感光像素111的输出进行合并处理。而是直接获取所述感光像素阵列中每个感光像素的输出,输出全尺寸分像素图像。
综上所述,图1所示的图像传感器中的感光像素阵列决定了图像的全尺寸像素。当拍照环境达到预设亮度时,以全尺寸像素输出图像;当拍照环境没有达到预设亮度时,将合并像素中的多个感光像素的输出相加读取合并像素值,根据合并像素值生成对应像素的图像。从而换取更多的进光量,提高输出图像的清晰度。
为了更加清楚的说明根据拍照环境的当前亮度生成对应像素的图像,通过图4和图5所示实施例说明如下:
图4是本发明另一个实施例的图像生成方法的流程图。
如图4所示,该图像生成方法包括以下步骤:
步骤201,获取拍照环境的感光度值。
步骤202,判断所述感光度值是否小于预设的第一阈值,若获知所述感光度值大于等于所述第一阈值,执行步骤203,若获知所述感光度值小于所述第一阈值,执行步骤204;
步骤203,根据所述感光像素阵列的输出生成全尺寸像素的图像。
步骤204,根据所述感光度值确定每个合并像素中需要合并的像素数量P,其中,P<=m*n。
步骤205,将属于同一所述合并像素中的P个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
具体地,首先,获取拍照环境的感光度值,比较感光度值与预设的第一阈值的大小。
如果判断获知感光度值大于等于第一阈值,则说明此时的拍照环境达到预设的亮度,即获取感光像素阵列中每个感光像素的输出,输出全尺寸像素图像。
如果判断获知感光度值小于第一阈值,则说明此时的拍照环境没有达到预设的亮度,需要提高进光量,进而,根据所述感光度值确定每个合并像素中需要合并的像素数量P,其中,P<=m*n。然后将属于同一所述合并像素中的P个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
例如:如果感光像素阵列为16M感光像素,当m=4,n=4时,且通过感光度值ISO表示拍照环境的当前亮度时,预先设置第一门限为1200,第二门限为2400;
目前,针对夜景效果提升都是在ISP后端进行ISO拉升,即把信号的增益拉高,以提升夜景效果,但这种方式会带来的问题是躁点也会随着有用信号一起被放大,导致在信号增强的同时,躁点也会被随着一起放大。而通过图4所示实施例通过图像传感器对像素大小的调整,来获取更大的进光量,具体如下:
当ISO大于1200且小于2400时,说明感光程度虽然没有达到要求,但是一般,确定每个合并像素中需要合并的像素数量为4,进而生成的图像为4M;
当ISO大于2400时,说明感光程度不仅没有达到要求,而且很差,确定每个合并像素中需要合并的像素数量为16,进而生成的图像为1M。由此可见,图片的大小,在夜景的环境下表现将不是特别重要,因为夜景的效果才是最重要的。
本实施例的图像生成方法,通过获取拍照环境的感光度值,判断感光度值与预设的第一阈值的大小,以确定是否将同一合并像素中多个感光像素的输出相加获取合并像素值,进而生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
图5是本发明另一个实施例的图像生成方法的流程图。
如图5所示,该图像生成方法包括以下步骤:
步骤301,获取拍照环境的自动曝光值;
步骤302,判断所述自动曝光值是否小于预设的第二阈值,若所述自动曝光值小于所述第二阈值,则执行步骤303,若所述曝光值大于等于所述第二阈值,则执行步骤304。
步骤303,根据所述感光像素阵列的输出生成全尺寸像素的图像。
步骤304,根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值。
步骤305,根据所有的合并像素值生成对应像素的图像。
具体地,首先,获取拍照环境的自动曝光值,比较曝光值与预设的第二阈值的大小。
如果判断获知自动曝光值小于第二阈值,则说明此时的拍照环境达到预设的亮度,即根据感光像素阵列中每个感光像素的输出,输出全尺寸像素图像。
如果判断获知自动曝光值大于等于第二阈值,则说明此时的拍照环境没有达到预设的亮度,需要提高进光量,即将同一合并像素中多个感光像素的输出相加获取合并像素值,根据所有的合并像素值输出对应像素的图像。其中,步骤304的具体实施过程参见图1中的步骤103,此处不再赘述。
例如:采用图5所示实施例实现自拍,将会检测到人脸,并且以人脸进行测光,当测光后,如果人脸的AE比较亮,那么说明周围的环境将比较暗,那么为了获取好的自拍效果,将切换为4M的模式,4个像素合并成一个像素,这样进光量将在暗环境下得到保证,使自拍效果得到保证。
当以人脸进行测光,如果人脸AE比较暗时,则说明当前场景比较亮,我们将会切换到16M的模式,因为此时的大像素的优势不明显,亮场景的对单像素的进光量可以得到保证.而16M可以满足对照片细节的要求,从而达到更完美的效果
本实施例的图像生成方法,通过获取拍照环境的曝光值,判断曝光值与预设的第二阈值的大小,以确定是否将同一合并像素中多个感光像素的输出相加获取合并像素值,进而生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
为了实现上述实施例,本发明还提出一种图像生成装置。
图6是本发明一个实施例的图像生成装置的结构示意图。
如图6所示,该图像生成装置包括:
图像传感器1和图像处理器2,其中,
所述图像传感器1的结构参见图1,具体包括:感光像素阵列11,以及设置在所述感光像素阵列11上的滤光片,其中,所述滤光片包括滤光单元阵列12,每个滤光单元121覆盖多个感光像素111并构成合并像素;
所述图像处理器2包括:
检测模块21,用于检测拍照环境是否达到预设亮度;
处理模块22,用于若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
需要说明的是,前述对图像生成方法实施例的解释说明也适用于该实施例的图像生成装置,此处不再赘述。
本发明实施例的图像生成装置,通过检测拍照环境的当前亮度是否达到预设要求;若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
图7是本发明另一个实施例的图像生成装置的结构示意图。
如图7所示,基于图6所示,所述检测模块21包括:
获取单元211,用于获取拍照环境的感光信息;
确定单元212,用于根据所述感光信息检测拍照环境的当前亮度是否达到预设要求。
在一个实施例中,
所述获取单元211,用于获取拍照环境的感光度值;
所述确定单元212,用于判断所述感光度值是否小于预设的第一阈值;若获知所述感光度值大于等于所述第一阈值,则确定所述当前亮度达到预设要求;若获知所述感光度值小于所述第一阈值,则确定所述当前亮度没有达到预设要求。
在另一个实施例中,
所述获取单元211,用于获取拍照环境的自动曝光值;
所述确定单元212,用于判断所述自动曝光值是否小于预设的第二阈值;
若获知所述自动曝光值大于等于所述第二阈值,则确定所述当前亮度没有达到预设要求;若获知所述自动曝光值小于所述第二阈值,则确定所述当前亮度达到预设要求。
基于上述实施例,为了进一步地提高图像质量,在一个实施例中,所述处理模块22还用于:
根据所述当前亮度确定每个合并像素中需要合并的像素数量P,其中,P<=m*n;
将属于同一所述合并像素中的P个感光像素的输出相加获取合并像素值。
例如:在一个实施例中,当m=4,n=4时,且通过感光度值ISO表示拍照环境的当前亮度时,
所述处理模块22用于:
当ISO大于预设的第一门限且小于预设的第二门限时,确定每个合并像素中需要合并的像素数量为4;
当ISO大于预设的第二门限时,确定每个合并像素中需要合并的像素数量为16。
基于上述实施例,进一步地,为了提高合并处理效率,在一个实施例中,若每个滤光单元覆盖2*2个感光像素;所述处理模块22用于:
采集所述感光像素阵列中第k行及第k+1行的输出并存入所述寄存器,其中k=2n-1,n为自然数,k+1小于等于所述感光像素阵列的总行数;及
从所述寄存器中提取所述第k行及第k+1行的输出,将所述合并像素中多个感光像素的输出相加获取合并像素值。
需要说明的是,前述对图像生成方法实施例的解释说明也适用于该实施例的图像生成装置,此处不再赘述。
基于上述实施例,在另一个实施例中,所述处理模块22还用于:
若确定所述当前亮度达到预设要求,则根据所述感光像素阵列的输出生成全尺寸像素的图像。
需要说明的是,前述对图像生成方法实施例的解释说明也适用于该实施例的图像生成装置,此处不再赘述。
为了实现上述实施例,本发明还提出一种终端设备。该终端设备包括:如上实施例提供的图像生成装置。
其中,所述终端设备类型很多,例如包括:具有拍照功能的手机、具有拍照功能的IPAD、或,具有拍照功能的智能穿戴设备。
需要说明的是,前述对图像生成方法实施例的解释说明也适用于该实施例的终端设备,此处不再赘述。
本发明实施例的终端设备,通过检测拍照环境的当前亮度是否达到预设要求;若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。由此,实现了在拍照环境光亮不足的环境下动态调整图像的像素,通过合并像素增加每个像素的进光量,抑制影像噪点,提高图像的清晰度。
图8是本发明一个实施例的终端设备的结构示意图,如图8所示,该终端设备包括:图像生成装置10,与所述图像生成装置10连接的中央处理器20及外存储器30,所述中央处理器20用于控制所述外存储器30存储图像。
需要说明的是,前述对图像生成方法实施例的解释说明也适用于该实施例的终端设备,其实现原理类似,此处不再赘述。
图9是本发明另一个实施例的终端设备的结构示意图,如图9所示,该终端设备包括:图像生成装置10,与所述图像生成装置10连接的中央处理器20及显示装置40,所述中央处理器20用于控制所述显示装置40显示图像。
需要说明的是,前述对图像生成方法实施例的解释说明也适用于该实施例的终端设备,其实现原理类似,此处不再赘述。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行***、装置或设备(如基于计算机的***、包括处理器的***或其他可以从指令执行***、装置或设备取指令并执行指令的***)使用,或结合这些指令执行***、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行***、装置或设备或结合这些指令执行***、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行***执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个代理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (20)

1.一种图像生成方法,其特征在于,预先提供的图像传感器包括:感光像素阵列,以及设置在所述感光像素阵列上的滤光片,其中,所述滤光片包括滤光单元阵列,每个滤光单元覆盖m*n个感光像素并构成合并像素,其中,m*n>1;所述方法包括以下步骤:
检测拍照环境的当前亮度是否达到预设要求;
若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
2.如权利要求1所述的方法,其特征在于,还包括:
若确定所述当前亮度达到预设要求,则根据所述感光像素阵列的输出生成全尺寸像素的图像。
3.如权利要求1所述的方法,其特征在于,所述检测拍照环境的当前亮度是否达到预设要求,包括:
获取拍照环境的感光信息;
根据所述感光信息检测拍照环境的当前亮度是否达到预设要求。
4.如权利要求3所述的方法,其特征在于,所述获取拍照环境的感光信息,包括:
获取拍照环境的感光度值;
所述根据感光信息检测拍照环境的当前亮度是否达到预设要求,包括:
判断所述感光度值是否小于预设的第一阈值;
若获知所述感光度值大于等于所述第一阈值,则确定所述当前亮度达到预设要求;
若获知所述感光度值小于所述第一阈值,则确定所述当前亮度没有达到预设要求。
5.如权利要求3所述的方法,其特征在于,所述获取拍照环境的感光信息,包括:
获取拍照环境的自动曝光值;
所述根据感光信息检测拍照环境的当前亮度是否达到预设要求,包括:
判断所述自动曝光值是否小于预设的第二阈值;
若获知所述自动曝光值大于等于所述第二阈值,则确定所述当前亮度没有达到预设要求;
若获知所述自动曝光值小于所述第二阈值,则确定所述当前亮度达到预设要求。
6.如权利要求1-5任一所述的方法,其特征在于,所述将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,包括:
根据所述当前亮度确定每个合并像素中需要合并的像素数量P,其中,P<=m*n;
将属于同一所述合并像素中的P个感光像素的输出相加获取合并像素值。
7.如权利要求6所述的方法,其特征在于,当m=4,n=4时,且通过感光度值ISO表示拍照环境的当前亮度时,
所述根据所述当前亮度确定每个合并像素中需要合并的像素数量P,其中,P<=m*n,包括:
当ISO大于预设的第一门限且小于预设的第二门限时,确定每个合并像素中需要合并的像素数量为4;
当ISO大于预设的第二门限时,确定每个合并像素中需要合并的像素数量为16。
8.如权利要求1-5任一所述的方法,其特征在于,若每个滤光单元覆盖2*2个感光像素;
所述根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,包括:
采集所述感光像素阵列中第k行及第k+1行的输出并存入所述寄存器,其中k=2n-1,n为自然数,k+1小于等于所述感光像素阵列的总行数;及
从所述寄存器中提取所述第k行及第k+1行的输出,将所述合并像素中多个感光像素的输出相加获取合并像素值。
9.一种图像生成装置,其特征在于,包括:图像传感器和图像处理器,其中,
所述图像传感器包括:感光像素阵列,以及设置在所述感光像素阵列上的滤光片,其中,所述滤光片包括滤光单元阵列,每个滤光单元覆盖m*n个感光像素并构成合并像素,其中,m*n>1;
所述图像处理器包括:
检测模块,用于检测拍照环境是否达到预设亮度;
处理模块,用于若确定所述当前亮度没有达到预设要求,则根据所述感光像素阵列的输出,将属于同一所述合并像素中的多个感光像素的输出相加获取合并像素值,进而根据所有的合并像素值生成对应像素的图像。
10.如权利要求9所述的装置,其特征在于,所述处理模块还用于:
若确定所述当前亮度达到预设要求,则根据所述感光像素阵列的输出生成全尺寸像素的图像。
11.如权利要求9所述的装置,其特征在于,所述检测模块包括:
获取单元,用于获取拍照环境的感光信息;
确定单元,用于根据所述感光信息检测拍照环境的当前亮度是否达到预设要求。
12.如权利要求11所述的装置,其特征在于,
所述获取单元,用于获取拍照环境的感光度值;
所述确定单元,用于判断所述感光度值是否小于预设的第一阈值;若获知所述感光度值大于等于所述第一阈值,则确定所述当前亮度达到预设要求;若获知所述感光度值小于所述第一阈值,则确定所述当前亮度没有达到预设要求。
13.如权利要求11所述的装置,其特征在于,
所述获取单元,用于获取拍照环境的自动曝光值;
所述确定单元,用于判断所述自动曝光值是否小于预设的第二阈值;
若获知所述自动曝光值大于等于所述第二阈值,则确定所述当前亮度没有达到预设要求;若获知所述自动曝光值小于所述第二阈值,则确定所述当前亮度达到预设要求。
14.如权利要求9-13任一所述的装置,其特征在于,所述处理模块还用于:
根据所述当前亮度确定每个合并像素中需要合并的像素数量P,其中,P<=m*n;
将属于同一所述合并像素中的P个感光像素的输出相加获取合并像素值。
15.如权利要求14所述的方法,其特征在于,当m=4,n=4时,且通过感光度值ISO表示拍照环境的当前亮度时,
所述处理模块用于:
当ISO大于预设的第一门限且小于预设的第二门限时,确定每个合并像素中需要合并的像素数量为4;
当ISO大于预设的第二门限时,确定每个合并像素中需要合并的像素数量为16。
16.如权利要求9-13任一所述的装置,其特征在于,若每个滤光单元覆盖2*2个感光像素;所述处理模块用于:
采集所述感光像素阵列中第k行及第k+1行的输出并存入所述寄存器,其中k=2n-1,n为自然数,k+1小于等于所述感光像素阵列的总行数;及
从所述寄存器中提取所述第k行及第k+1行的输出,将所述合并像素中多个感光像素的输出相加获取合并像素值。
17.一种终端设备,其特征在于,包括:如权利要求9-16任一所述的图像生成装置。
18.如权利要求17所述的设备,其特征在于,所述终端设备包括:
手机、IPAD、或,智能穿戴设备。
19.如权利要求17所述的设备,其特征在于,还包括:与所述图像生成装置连接的中央处理器及外存储器,所述中央处理器用于控制所述外存储器存储图像。
20.如权利要求17所述的设备,其特征在于,还包括:与所述图像生成装置连接的中央处理器及显示装置,所述中央处理器用于控制所述显示装置显示图像。
CN201510965025.XA 2015-12-18 2015-12-18 图像生成方法、装置及终端设备 Active CN105611185B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510965025.XA CN105611185B (zh) 2015-12-18 2015-12-18 图像生成方法、装置及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510965025.XA CN105611185B (zh) 2015-12-18 2015-12-18 图像生成方法、装置及终端设备

Publications (2)

Publication Number Publication Date
CN105611185A true CN105611185A (zh) 2016-05-25
CN105611185B CN105611185B (zh) 2017-10-31

Family

ID=55990697

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510965025.XA Active CN105611185B (zh) 2015-12-18 2015-12-18 图像生成方法、装置及终端设备

Country Status (1)

Country Link
CN (1) CN105611185B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106506977A (zh) * 2016-10-08 2017-03-15 珠海市魅族科技有限公司 感光芯片的自适应调整方法和装置
WO2017101451A1 (zh) * 2015-12-18 2017-06-22 广东欧珀移动通信有限公司 成像方法、成像装置及电子装置
WO2018099007A1 (zh) * 2016-11-29 2018-06-07 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
CN108269243A (zh) * 2018-01-18 2018-07-10 福州鑫图光电有限公司 一种图像信噪比的增强方法及终端
CN109398731A (zh) * 2017-08-18 2019-03-01 深圳市道通智能航空技术有限公司 一种提升3d图像深度信息的方法、装置及无人机
US10382709B2 (en) 2016-11-29 2019-08-13 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method and apparatus, and electronic device
US10382675B2 (en) 2016-11-29 2019-08-13 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method and apparatus, and electronic device including a simulation true-color image
CN110475066A (zh) * 2019-08-20 2019-11-19 Oppo广东移动通信有限公司 控制方法、成像装置和电子设备
CN110874829A (zh) * 2018-08-31 2020-03-10 北京小米移动软件有限公司 图像处理方法及装置、电子设备及存储介质
CN111970451A (zh) * 2020-08-31 2020-11-20 Oppo(重庆)智能科技有限公司 图像处理方法、图像处理装置及终端设备
CN112437237A (zh) * 2020-12-16 2021-03-02 维沃移动通信有限公司 拍摄方法及装置
WO2021057731A1 (zh) * 2019-09-27 2021-04-01 维沃移动通信有限公司 图像处理方法、装置、电子设备和介质
US11601600B2 (en) 2018-08-13 2023-03-07 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Control method and electronic device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1448662A (zh) * 2002-03-29 2003-10-15 陈烈涛 烟道热管蒸发器及其分离式热管体系
CN103531603A (zh) * 2013-10-30 2014-01-22 上海集成电路研发中心有限公司 一种cmos图像传感器
WO2015083683A1 (ja) * 2013-12-05 2015-06-11 オリンパス株式会社 撮像装置、撮像装置の作動方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1448662A (zh) * 2002-03-29 2003-10-15 陈烈涛 烟道热管蒸发器及其分离式热管体系
CN103531603A (zh) * 2013-10-30 2014-01-22 上海集成电路研发中心有限公司 一种cmos图像传感器
WO2015083683A1 (ja) * 2013-12-05 2015-06-11 オリンパス株式会社 撮像装置、撮像装置の作動方法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017101451A1 (zh) * 2015-12-18 2017-06-22 广东欧珀移动通信有限公司 成像方法、成像装置及电子装置
US10257447B2 (en) 2015-12-18 2019-04-09 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Imaging method, imaging device, and electronic device
CN106506977A (zh) * 2016-10-08 2017-03-15 珠海市魅族科技有限公司 感光芯片的自适应调整方法和装置
US10382675B2 (en) 2016-11-29 2019-08-13 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method and apparatus, and electronic device including a simulation true-color image
WO2018099007A1 (zh) * 2016-11-29 2018-06-07 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
US10432905B2 (en) 2016-11-29 2019-10-01 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and apparatus for obtaining high resolution image, and electronic device for same
US10382709B2 (en) 2016-11-29 2019-08-13 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method and apparatus, and electronic device
CN109398731A (zh) * 2017-08-18 2019-03-01 深圳市道通智能航空技术有限公司 一种提升3d图像深度信息的方法、装置及无人机
CN108269243A (zh) * 2018-01-18 2018-07-10 福州鑫图光电有限公司 一种图像信噪比的增强方法及终端
US11601600B2 (en) 2018-08-13 2023-03-07 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Control method and electronic device
CN110874829A (zh) * 2018-08-31 2020-03-10 北京小米移动软件有限公司 图像处理方法及装置、电子设备及存储介质
CN110874829B (zh) * 2018-08-31 2022-10-14 北京小米移动软件有限公司 图像处理方法及装置、电子设备及存储介质
CN110475066A (zh) * 2019-08-20 2019-11-19 Oppo广东移动通信有限公司 控制方法、成像装置和电子设备
WO2021057731A1 (zh) * 2019-09-27 2021-04-01 维沃移动通信有限公司 图像处理方法、装置、电子设备和介质
US11678066B2 (en) 2019-09-27 2023-06-13 Vivo Mobile Communication Co., Ltd. Image processing method, electronic device and medium
CN111970451A (zh) * 2020-08-31 2020-11-20 Oppo(重庆)智能科技有限公司 图像处理方法、图像处理装置及终端设备
CN112437237A (zh) * 2020-12-16 2021-03-02 维沃移动通信有限公司 拍摄方法及装置

Also Published As

Publication number Publication date
CN105611185B (zh) 2017-10-31

Similar Documents

Publication Publication Date Title
CN105611185A (zh) 图像生成方法、装置及终端设备
Liba et al. Handheld mobile photography in very low light.
CN111028189B (zh) 图像处理方法、装置、存储介质及电子设备
WO2021179820A1 (zh) 图像处理方法、装置、存储介质及电子设备
TWI662842B (zh) 圖像傳感器及輸出方法、相位對焦方法、成像裝置和行動裝置
JP7077395B2 (ja) 多重化高ダイナミックレンジ画像
CN105578067B (zh) 图像生成方法、装置及终端设备
CN101116324B (zh) 用于从多次曝光中创建高动态范围图片的方法和装置
CN105592270B (zh) 图像亮度补偿方法、装置及终端设备
WO2017101561A1 (zh) 高动态范围图像的生成方法、拍照装置和终端、成像方法
CN112565636B (zh) 图像处理方法、装置、设备和存储介质
KR20060045424A (ko) 휘도 정정을 갖는 디지털 카메라
CN105430359A (zh) 成像方法、图像传感器、成像装置及电子装置
CN105592303A (zh) 成像方法、成像装置及电子装置
CN101305397A (zh) 基于多个图像帧形成图像的方法,图像处理***和数字照相机
CN110602467A (zh) 图像降噪方法、装置、存储介质及电子设备
CN110166707A (zh) 图像处理方法、装置、电子设备以及存储介质
KR20230098575A (ko) 프레임 프로세싱 및/또는 캡처 명령 시스템들 및 기법들
Battiato et al. Image processing for embedded devices
CN105430360B (zh) 成像方法、图像传感器、成像装置及电子装置
CN105430363A (zh) 成像方法、成像装置及电子装置
CN105611257A (zh) 成像方法、图像传感器、成像装置及电子装置
CN105578080A (zh) 成像方法、图像传感器、成像装置及电子装置
Martel et al. Parallel HDR tone mapping and auto-focus on a cellular processor array vision chip
CN105578081A (zh) 成像方法、图像传感器、成像装置及电子装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Patentee after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.

Address before: Changan town in Guangdong province Dongguan 523859 usha Beach Road No. 18

Patentee before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.