CN112243096B - 像素合成模式下的像素读取方法及装置、存储介质、图像采集设备 - Google Patents

像素合成模式下的像素读取方法及装置、存储介质、图像采集设备 Download PDF

Info

Publication number
CN112243096B
CN112243096B CN202011056486.2A CN202011056486A CN112243096B CN 112243096 B CN112243096 B CN 112243096B CN 202011056486 A CN202011056486 A CN 202011056486A CN 112243096 B CN112243096 B CN 112243096B
Authority
CN
China
Prior art keywords
pixel
reading
pixels
row
rows
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011056486.2A
Other languages
English (en)
Other versions
CN112243096A (zh
Inventor
陈孟儒
吉倩倩
徐东超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Galaxycore Shanghai Ltd Corp
Original Assignee
Galaxycore Shanghai Ltd Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Galaxycore Shanghai Ltd Corp filed Critical Galaxycore Shanghai Ltd Corp
Priority to CN202011056486.2A priority Critical patent/CN112243096B/zh
Publication of CN112243096A publication Critical patent/CN112243096A/zh
Application granted granted Critical
Publication of CN112243096B publication Critical patent/CN112243096B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

一种像素合成模式下的像素读取方法及装置、存储介质、图像采集设备，所述方法包括：将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取。本发明可以提高含有PD像素的图像传感器在不进行自动聚焦操作时的图像效果。

Description

像素合成模式下的像素读取方法及装置、存储介质、图像采集 设备
技术领域
本发明涉及图像传感器领域，尤其涉及一种像素合成模式下的像素读取方法及装置、存储介质、图像采集设备。
背景技术
随着智能手机的普及，人们对移动智能终端的图像拍摄质量的需求日益提高。
在现有技术中，为了实现更加快速的对焦，可以采用相位检测自动对焦(PhaseDetection Auto Focus，PDAF)技术，并设置一定数量的相位检测(Phase Detection，PD)像素。所述PD像素可以设置于图像传感器像素阵列中，例如与具有成像功能的像素相邻放置，并作为非成像像素实现相位检测功能。实际输出图像时PD像素点会被当作坏点处理。
在现有的一种像素合成(Binning)模式读取方法中，采用合成读取方式(例如在行列方向或者行方向做binning操作)，将PD像素的值与其他像素的值合并一起输出。
然而当采用像素合成模式读取时，合并后PD像素点的PD信息会损失，影响聚焦效果，同时合并后的PD像素点的相对密度增加，作为坏点影响图像效果。
亟需一种像素合成模式下的像素读取方法，可以提高含有PD像素的图像传感器在不进行自动聚焦操作时的图像效果。
发明内容
本发明解决的技术问题是提供一种像素合成模式下的像素读取方法及装置、存储介质、图像采集设备，可以提高含有PD像素的图像传感器在不进行自动聚焦操作时的图像效果。
为解决上述技术问题，本发明实施例提供一种像素合成模式下的像素读取方法，包括以下步骤：将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取。
可选的，对所述非PD像素行进行合成读取包括：针对各个最小处理单元，将所述非PD像素行分为至少两个非PD像素行组，每个非PD像素行组包含一行或多行；根据各个非PD像素行组中的非PD像素行，进行所述合成读取，以得到各个非PD像素行组的读取数据。
可选的，所述图像传感器像素阵列为四像素单元阵列，每个最小处理单元包含至少两组同色的2×2像素组；所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；其中，所述第一非PD像素行组仅包含同色的2×2像素组，所述第二非PD像素行组包含与所述PD像素行相邻的非PD像素行。
可选的，对所述非PD像素行进行合成读取包括：针对所述第一非PD像素行组，分别对每个同色的2×2像素组中的像素进行合成读取，以得到第一非PD像素行组的读取数据；针对所述第二非PD像素行组，分别对同色的非PD像素进行合成读取，以得到第二非PD像素行组的读取数据。
可选的，所述的像素读取方法还包括：采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据。
可选的，所述图像传感器像素阵列为RGB拜耳阵列结构，每个最小处理单元包含至少两组相邻的2×2拜耳像素组，每个2×2拜耳像素组包含第一行拜耳像素以及第二行拜耳像素；所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；其中，所述第一非PD像素行组包含在行方向上相邻两组2×2拜耳像素组的第一行拜耳像素所在的像素行，以及与所述PD像素行相邻的非PD像素行；所述第二非PD像素行组包含相邻两组2×2拜耳像素组的第二行拜耳像素所在的像素行。
可选的，对所述非PD像素行进行合成读取包括：针对所述第一非PD像素行组，在所述第一行拜耳像素所在的像素行以及非PD像素行中，选取同色的像素进行合成读取，以得到第一非PD像素行组的读取数据；针对所述第二非PD像素行组，分别对同色的非PD像素进行合成读取，以得到第二非PD像素行组的读取数据。
可选的，所述的像素读取方法还包括：采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据。
可选的，所述图像传感器像素阵列中的各个像素具有一一对应的光电二极管；所述方法还包括：消除所述PD像素行中的各个像素对应的光电二极管中的电荷。
为解决上述技术问题，本发明实施例提供一种像素合成模式下的像素读取装置，包括：像素行确定模块，用于将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；合成读取模块，用于针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取。
为解决上述技术问题，本发明实施例提供一种存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述像素合成模式下的像素读取方法的步骤。
为解决上述技术问题，本发明实施例提供一种图像采集设备，包括图像传感器像素阵列和控制器，所述控制器用于执行上述像素合成模式下的像素读取方法，以对所述图像传感器像素阵列中的非PD像素进行读取。
与现有技术相比，本发明实施例的技术方案具有以下有益效果：
在本发明实施例中，通过设置对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取，可以仅对非PD像素行进行读取，相比于现有技术中，需要对PD像素进行读取并视为坏点处理，导致图像效果下降，采用本发明实施例的方案，由于PD像素未被读取，图像坏点数目较少，从而提高含有PD像素的图像传感器在不进行自动聚焦操作时的图像效果。
进一步，将所述非PD像素行分为至少两个非PD像素行组，根据各个非PD像素行组中的非PD像素行，进行所述合成读取，有助于针对不同类型的图像传感器像素阵列，均实现有效读取。
进一步，针对四像素单元阵列以及RGB拜耳阵列结构，分别采用不同的方式划分第一非PD像素行组以及第二非PD像素行组，可以使得读取结果更加符合像素阵列的特性，从而进一步提高读取效果。
进一步，采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据，相比于采用去坏点算法计算的替代值去替代所述PD像素的读出数据，图像效果更好。
进一步，所述图像传感器像素阵列中的各个像素具有一一对应的光电二极管；所述方法还包括：消除所述PD像素行中的各个像素对应的光电二极管中的电荷。由于PD像素行的电荷积累，甚至在接近或超出满阱容量时容易导致发生溢出(Blooming)效应，采用本发明实施例的方案，可以有效避免电荷累积，提高图像传感器的成像质量。
附图说明
图1是现有技术中一种图像传感器像素阵列的读取顺序示意图；
图2是本发明实施例中一种像素合成模式下的像素读取方法的流程图；
图3是本发明实施例中第一种图像传感器像素阵列的读取顺序示意图；
图4是本发明实施例中第二种图像传感器像素阵列的读取顺序示意图；
图5是本发明实施例中一种像素合成模式下的像素读取装置的结构示意图。
具体实施方式
如前所述，在现有的一种像素合成模式读取方法中，采用合成读取方式，将PD像素的值与其他像素的值合并一起输出。然而当采用像素合成模式读取时，被当作坏点处理的PD像素点相对密度增加，影响图像效果。
参照图1，图1是现有技术中一种图像传感器像素阵列的读取顺序示意图。
其中，所述图像传感器像素阵列可以为四像素单元(4-cell)阵列，每个最小处理单元包含至少两组同色的2×2像素组，如图中所示的1组2×2红色(R)像素组、1组2×2蓝色(B)像素组以及2组2×2绿色像素组(例如可以为2×2Gr像素组以及2×2Gb像素组)。
在图1所示的图像传感器像素阵列中，可以采用相邻的Gb4像素和B3像素作为PD像素。
在读取过程中，对于每个四像素(4-cell)进行合成读取，而不论该四像素中是否存在有PD像素。如对R1～R4合成读取为R像素，对Gr1～Gr4合成读取为Gr像素，对Gb1～Gb4合成读取为Gb像素，对B1～B4合成读取为B像素。PD像素的值会与其他Gb像素或B像素的值合并一起输出，导致失去或减少PD像素的特性，影响后续计算，影响后续算法准确性，难以达到好的聚焦效果。
本发明的发明人经过研究发现，在现有技术中，存在为了提高成像效果而不需要对图像传感器进行对焦操作的情况，此时即使对PD像素进行读取，对其读取结果的处理方式也往往是视为坏点处理，导致图像效果下降。
在本发明实施例中，将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取。采用上述方案，通过设置对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取，可以仅对非PD像素行进行读取，相比于现有技术中，需要对PD像素进行读取并视为坏点处理，导致图像效果下降，采用本发明实施例的方案，由于PD像素未被读取，图像坏点数目较少，从而提高含有PD像素的图像传感器在不进行自动聚焦操作时的图像效果。
为使本发明的上述目的、特征和有益效果能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。
参照图2，图2是本发明实施例中一种像素合成模式下的像素读取方法的流程图。所述像素合成模式下的像素读取方法可以包括步骤S21至步骤S22：
步骤S21：将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行。
其中，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；
步骤S22：针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取。
在步骤S21的具体实施中，所述图像传感器像素阵列可以为四像素单元阵列，还可以为RGB拜耳阵列结构，还可以为其他适当的像素阵列。
在步骤S22的具体实施中，针对各个最小处理单元，可以依据像素阵列的类型，将所述非PD像素行分为至少两个非PD像素行组，各个非PD像素行组中非PD像素的颜色可以为2种。
在本发明实施例中，通过设置对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取，可以仅对非PD像素行进行读取，相比于现有技术中，需要对PD像素进行读取并视为坏点处理，导致图像效果下降，采用本发明实施例的方案，可以减少被视为坏点的像素数量，从而提高含有PD像素的图像传感器在不进行自动聚焦操作时的图像效果。
进一步地，对所述非PD像素行进行合成读取的步骤可以包括：针对各个最小处理单元，将所述非PD像素行分为至少两个非PD像素行组，每个非PD像素行组包含一行或多行；根据各个非PD像素行组中的非PD像素行，进行所述合成读取，以得到各个非PD像素行组的读取数据。
在本发明实施例中，将所述非PD像素行分为至少两个非PD像素行组，根据各个非PD像素行组中的非PD像素行，进行所述合成读取，有助于针对不同类型的图像传感器像素阵列，均实现有效读取。
在本发明实施例的一种具体实施方式中，所述图像传感器像素阵列可以为四像素单元阵列，每个最小处理单元包含至少两组同色的2×2像素组；所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；其中，所述第一非PD像素行组仅包含同色的2×2像素组，所述第二非PD像素行组包含与所述PD像素行相邻的非PD像素行。
参照图3，图3是本发明实施例中第一种图像传感器像素阵列的读取顺序示意图。
具体地，所述第一种图像传感器像素阵列可以为四像素单元阵列，每个最小处理单元包含至少两组同色的2×2像素组。如图中所示的1组2×2红色(R)像素组、1组2×2蓝色(B)像素组以及2组2×2绿色像素组(例如可以为2×2Gr像素组以及2×2Gb像素组)。
在图3所示的图像传感器像素阵列中，可以采用相邻的Gb4像素和B3像素作为PD像素。
所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；其中，所述第一非PD像素行组仅包含同色的2×2像素组，所述第二非PD像素行组包含与所述PD像素行相邻的非PD像素行。
也即在图3中，第一非PD像素行组包含R1～R4以及Gr1～Gr4，第二非PD像素行组包含Gb1～Gb2以及B1～B2，PD像素行包含Gb3～Gb4以及B3～B4。
更进一步地，对所述非PD像素行进行合成读取的步骤可以包括：针对所述第一非PD像素行组，分别对每个同色的2×2像素组中的像素进行合成读取，以得到第一非PD像素行组的读取数据；针对所述第二非PD像素行组，分别对同色的非PD像素进行合成读取，以得到第二非PD像素行组的读取数据。
如图3所示，在对所述非PD像素行进行合成读取中，针对所述第一非PD像素行组，分别对R1～R4以及Gr1～Gr4进行合成读取，以得到R像素以及Gr像素；针对所述第二非PD像素行组，分别对Gb1～Gb2以及B1～B2进行合成读取，以得到Gb12像素以及B12像素。
也即在对所述非PD像素行进行合成读取中，可以包括针对所述第一非PD像素行组的读取(例如对图3示出的两行像素的读取)以及针对第二非PD像素行组的读取(例如对图3示出的单行像素的读取)。
更进一步地，所述像素读取方法还可以包括：采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据。也即图3示出的Gb12像素以及B12像素。
在本发明实施例中，由于不对PD像素行进行读取，可以设置采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据，相比于采用去坏点算法计算的替代值去替代所述PD像素的读出数据，图像效果更好。
在本发明实施例的另一种具体实施方式中，所述图像传感器像素阵列可以为RGB拜耳阵列结构，每个最小处理单元包含至少两组相邻的2×2拜耳像素组，每个2×2拜耳像素组包含第一行拜耳像素以及第二行拜耳像素；所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；其中，所述第一非PD像素行组包含在行方向上相邻两组2×2拜耳像素组的第一行拜耳像素所在的像素行，以及与所述PD像素行相邻的非PD像素行；所述第二非PD像素行组包含相邻两组2×2拜耳像素组的第二行拜耳像素所在的像素行。
在本发明实施例的另一种具体实施方式中，读取顺序还可以设置为：R1、R2合成R，Gr1、Gr2合成Gr，对R3、R4、Gr3、Gr4不进行读取，但是仍然需要对R3、R4、Gr3、Gr4清空电子。
参照图4，图4是本发明实施例中第二种图像传感器像素阵列的读取顺序示意图。
具体地，所述第二种图像传感器像素阵列可以为RGB拜耳阵列结构，每个最小处理单元包含至少两组相邻的2×2拜耳像素组，每个2×2拜耳像素组包含第一行拜耳像素以及第二行拜耳像素。如图中所示的至少两组相邻的2×2拜耳像素组可以为1组红色(R)拜耳像素组(包含R1、R2、R3以及R4)以及2组绿色(G)拜耳像素组，例如第一组可以包含Gr1、Gr2、Gr3以及Gr4，第二组可以包含Gb1、Gb2、Gb3以及Gb4。
在图4所示的图像传感器像素阵列中，可以采用B3像素作为PD像素。
所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；其中，所述第一非PD像素行组包含在行方向上相邻两组2×2拜耳像素组的第一行拜耳像素所在的像素行，以及与所述PD像素行相邻的非PD像素行；所述第二非PD像素行组包含相邻两组2×2拜耳像素组的第二行拜耳像素所在的像素行。
也即在图4中，第一非PD像素行组包含R1～R4以及Gr1～Gr4，第二非PD像素行组包含Gb1～Gb2以及B1～B2，PD像素行包含Gb3～Gb4以及B3～B4。
需要指出的是，在本发明实施例中，可以对PD像素的位置不做限制，例如可以为图3示出的横向相邻的PD像素，还可以为图4示出的单个PD像素，还可以为竖向相邻的PD像素，还可以为间隔预设数量个像素的不相邻的PD像素。
更进一步地，对所述非PD像素行进行合成读取的步骤可以包括：针对所述第一非PD像素行组，在所述第一行拜耳像素所在的像素行以及非PD像素行中，选取同色的像素进行合成读取，以得到第一非PD像素行组的读取数据；针对所述第二非PD像素行组，分别对同色的非PD像素进行合成读取，以得到第二非PD像素行组的读取数据。
如图4所示，在对所述非PD像素行进行合成读取中，针对所述第一非PD像素行组，分别对R1～R4以及Gr1～Gr4进行合成读取，以得到R像素以及Gr像素。针对所述第二非PD像素行组，分别对Gb1～Gb2以及B1～B2进行合成读取，以得到Gb12像素以及B12像素。
也即在对所述非PD像素行进行合成读取中，可以包括针对所述第一非PD像素行组的读取(例如对图4示出的对第一行像素以及第三行像素的读取)以及针对第二非PD像素行组的读取(例如对图4示出的对第二行像素的读取)。
更进一步地，所述像素读取方法还可以包括：采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据。也即图4示出的Gb12像素以及B12像素。
在本发明实施例的另一种具体实施方式中，读取顺序还可以设置为：R1、R2合成R，Gr1、Gr2合成Gr，Gb1、Gb2合成Gb，B1、B2合成B，对R3、R4、Gr3、Gr4不进行读取，但是仍然需要对R3、R4、Gr3、Gr4清空电子。
在本发明实施例中，由于不对PD像素行进行读取，可以设置采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据，相比于采用去坏点算法计算的替代值去替代所述PD像素的读出数据，图像效果更好。
在本发明实施例中，针对四像素单元阵列以及RGB拜耳阵列结构，分别采用不同的方式划分第一非PD像素行组以及第二非PD像素行组，可以使得读取结果更加符合像素阵列的特性，从而进一步提高读取效果。
进一步地，所述图像传感器像素阵列中的各个像素具有一一对应的光电二极管；所述像素读取方法还可以包括：消除所述PD像素行中的各个像素对应的光电二极管中的电荷。
在本发明实施例中，由于PD像素行的电荷积累，甚至在接近或超出满阱容量时容易导致发生溢出(Blooming)效应，采用本发明实施例的方案，可以有效避免电荷累积，提高图像传感器的成像质量。
参照图5，图5是本发明实施例中一种像素合成模式下的像素读取装置的结构示意图。所述像素合成模式下的像素读取装置可以包括：
像素行确定模块51，用于将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；
合成读取模块52，用于针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取。
关于该像素合成模式下的像素合成模式下的像素读取装置的原理、具体实现和有益效果请参照前文及图2至图4示出的关于像素合成模式下的像素合成模式下的像素读取方法的相关描述，此处不再赘述。
本发明实施例还提供了一种存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述方法的步骤。所述存储介质可以是计算机可读存储介质，例如可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器，还可以包括光盘、机械硬盘、固态硬盘等。
本发明实施例还提供了一种图像采集设备，包括图像传感器像素阵列和控制器，其特征在于，所述控制器用于执行上述方法，以对所述图像传感器像素阵列中的非PD像素进行读取。
虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (11)

1.一种像素合成模式下的像素读取方法，其特征在于，包括以下步骤：
将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；
针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取；
其中，对所述非PD像素行进行合成读取包括：
针对各个最小处理单元，将所述非PD像素行分为至少两个非PD像素行组，每个非PD像素行组包含一行或多行；
根据各个非PD像素行组中的非PD像素行，进行所述合成读取，以得到各个非PD像素行组的读取数据。
2.根据权利要求1所述的像素读取方法，其特征在于，所述图像传感器像素阵列为四像素单元阵列，每个最小处理单元包含至少两组同色的2×2像素组；
所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；
其中，所述第一非PD像素行组仅包含同色的2×2像素组，所述第二非PD像素行组包含与所述PD像素行相邻的非PD像素行。
3.根据权利要求2所述的像素读取方法，其特征在于，对所述非PD像素行进行合成读取包括：
针对所述第一非PD像素行组，分别对每个同色的2×2像素组中的像素进行合成读取，以得到第一非PD像素行组的读取数据；
针对所述第二非PD像素行组，分别对同色的非PD像素进行合成读取，以得到第二非PD像素行组的读取数据。
4.根据权利要求3所述的像素读取方法，其特征在于，还包括：
采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据。
5.根据权利要求1所述的像素读取方法，其特征在于，所述图像传感器像素阵列为RGB拜耳阵列结构，每个最小处理单元包含至少两组相邻的2×2拜耳像素组，每个2×2拜耳像素组包含第一行拜耳像素以及第二行拜耳像素；
所述非PD像素行组包括第一非PD像素行组以及第二非PD像素行组；
其中，所述第一非PD像素行组包含在行方向上相邻两组2×2拜耳像素组的第一行拜耳像素所在的像素行，以及与所述PD像素行相邻的非PD像素行；
所述第二非PD像素行组包含相邻两组2×2拜耳像素组的第二行拜耳像素所在的像素行。
6.根据权利要求5所述的像素读取方法，其特征在于，对所述非PD像素行进行合成读取包括：
针对所述第一非PD像素行组，在所述第一行拜耳像素所在的像素行以及非PD像素行中，选取同色的像素进行合成读取，以得到第一非PD像素行组的读取数据；
针对所述第二非PD像素行组，分别对同色的非PD像素进行合成读取，以得到第二非PD像素行组的读取数据。
7.根据权利要求6所述的像素读取方法，其特征在于，还包括：
采用所述第二非PD像素行组的读取数据作为所述PD像素行的读取数据。
8.根据权利要求1所述的像素读取方法，其特征在于，所述图像传感器像素阵列中的各个像素具有一一对应的光电二极管；
所述方法还包括：
消除所述PD像素行中的各个像素对应的光电二极管中的电荷。
9.一种像素合成模式下的像素读取装置，其特征在于，包括：
像素行确定模块，用于将图像传感器像素阵列中包含PD像素的像素行记为PD像素行，将除所述PD像素行之外的其他像素行记为非PD像素行，所述图像传感器像素阵列包含多个最小处理单元，每个最小处理单元包含2M×2N个相邻的像素，其中，每个最小处理单元包含一个或多个PD像素，m、n为正整数且m≥2，n≥2；
合成读取模块，用于针对各个最小处理单元，对所述非PD像素行进行合成读取，以得到各个非PD像素行的读取数据，并且不对所述PD像素行进行读取；
其中，对所述非PD像素行进行合成读取包括：
针对各个最小处理单元，将所述非PD像素行分为至少两个非PD像素行组，每个非PD像素行组包含一行或多行；
根据各个非PD像素行组中的非PD像素行，进行所述合成读取，以得到各个非PD像素行组的读取数据。
10.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时执行权利要求1至8任一项所述像素合成模式下的像素读取方法的步骤。
11.一种图像采集设备，包括图像传感器像素阵列和控制器，其特征在于，所述控制器用于执行权利要求1至8任一项所述像素合成模式下的像素读取方法，以对所述图像传感器像素阵列中的非PD像素进行读取。
CN202011056486.2A 2020-09-30 2020-09-30 像素合成模式下的像素读取方法及装置、存储介质、图像采集设备 Active CN112243096B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011056486.2A CN112243096B (zh) 2020-09-30 2020-09-30 像素合成模式下的像素读取方法及装置、存储介质、图像采集设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011056486.2A CN112243096B (zh) 2020-09-30 2020-09-30 像素合成模式下的像素读取方法及装置、存储介质、图像采集设备

Publications (2)

Publication Number Publication Date
CN112243096A CN112243096A (zh) 2021-01-19
CN112243096B true CN112243096B (zh) 2024-01-02

Family

ID=74172184

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011056486.2A Active CN112243096B (zh) 2020-09-30 2020-09-30 像素合成模式下的像素读取方法及装置、存储介质、图像采集设备

Country Status (1)

Country Link
CN (1) CN112243096B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104904205A (zh) * 2013-01-07 2015-09-09 国立研究开发法人情报通信研究机构 立体影像编码装置、立体影像解码装置、立体影像编码方法、立体影像解码方法、立体影像编码程序以及立体影像解码程序
CN105306786A (zh) * 2014-06-30 2016-02-03 半导体元件工业有限责任公司 用于具有相位检测像素的图像传感器的图像处理方法
CN105590939A (zh) * 2015-12-18 2016-05-18 广东欧珀移动通信有限公司 图像传感器及输出方法、相位对焦方法、成像装置和终端
CN105611122A (zh) * 2015-12-18 2016-05-25 广东欧珀移动通信有限公司 图像传感器及输出方法、相位对焦方法、成像装置和终端
WO2017181381A1 (zh) * 2016-04-21 2017-10-26 华为技术有限公司 一种获取深度信息的方法及摄像装置
CN208158780U (zh) * 2017-05-24 2018-11-27 半导体元件工业有限责任公司 图像传感器
CN109474771A (zh) * 2017-09-08 2019-03-15 苹果公司 图像捕获设备、像素和改善相位检测自动聚焦性能的方法
CN109638029A (zh) * 2013-06-28 2019-04-16 索尼公司 固态成像装置和电子设备
CN209283368U (zh) * 2018-10-31 2019-08-20 上海集成电路研发中心有限公司 一种调整图像传感器像素排列的装置及***
CN110278376A (zh) * 2019-07-03 2019-09-24 Oppo广东移动通信有限公司 对焦方法、互补金属氧化物图像传感器、终端及存储介质
CN111294522A (zh) * 2019-02-28 2020-06-16 北京展讯高科通信技术有限公司 Hdr图像成像方法、装置以及计算机存储介质
US10762655B1 (en) * 2018-09-11 2020-09-01 Apple Inc. Disparity estimation using sparsely-distributed phase detection pixels

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9749556B2 (en) * 2015-03-24 2017-08-29 Semiconductor Components Industries, Llc Imaging systems having image sensor pixel arrays with phase detection capabilities
US20170374306A1 (en) * 2016-06-23 2017-12-28 Semiconductor Components Industries, Llc Image sensor system with an automatic focus function
US10423049B2 (en) * 2017-06-12 2019-09-24 Qualcomm Incorporated Systems and methods for enabling transmission of phase detection data
US10397465B2 (en) * 2017-09-01 2019-08-27 Qualcomm Incorporated Extended or full-density phase-detection autofocus control
US10594921B2 (en) * 2018-04-26 2020-03-17 Qualcomm Incorporated Dual phase detection power optimizations
US11405535B2 (en) * 2019-02-28 2022-08-02 Qualcomm Incorporated Quad color filter array camera sensor configurations

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104904205A (zh) * 2013-01-07 2015-09-09 国立研究开发法人情报通信研究机构 立体影像编码装置、立体影像解码装置、立体影像编码方法、立体影像解码方法、立体影像编码程序以及立体影像解码程序
CN109638029A (zh) * 2013-06-28 2019-04-16 索尼公司 固态成像装置和电子设备
CN105306786A (zh) * 2014-06-30 2016-02-03 半导体元件工业有限责任公司 用于具有相位检测像素的图像传感器的图像处理方法
CN105590939A (zh) * 2015-12-18 2016-05-18 广东欧珀移动通信有限公司 图像传感器及输出方法、相位对焦方法、成像装置和终端
CN105611122A (zh) * 2015-12-18 2016-05-25 广东欧珀移动通信有限公司 图像传感器及输出方法、相位对焦方法、成像装置和终端
WO2017181381A1 (zh) * 2016-04-21 2017-10-26 华为技术有限公司 一种获取深度信息的方法及摄像装置
CN208158780U (zh) * 2017-05-24 2018-11-27 半导体元件工业有限责任公司 图像传感器
CN109474771A (zh) * 2017-09-08 2019-03-15 苹果公司 图像捕获设备、像素和改善相位检测自动聚焦性能的方法
US10762655B1 (en) * 2018-09-11 2020-09-01 Apple Inc. Disparity estimation using sparsely-distributed phase detection pixels
CN209283368U (zh) * 2018-10-31 2019-08-20 上海集成电路研发中心有限公司 一种调整图像传感器像素排列的装置及***
CN111294522A (zh) * 2019-02-28 2020-06-16 北京展讯高科通信技术有限公司 Hdr图像成像方法、装置以及计算机存储介质
CN110278376A (zh) * 2019-07-03 2019-09-24 Oppo广东移动通信有限公司 对焦方法、互补金属氧化物图像传感器、终端及存储介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Single image super-resolution via phase congruency analysis;Licheng Yu;《2013 Visual Communications and Image Processing (VCIP)》;全文 *
全局快门像素技术和CMOS图像传感器形成强大的技术组合;Aptina公司;电子设计技术(09);全文 *
多视点立体图像视频采集***设计与实现;汪火根;《中国优秀硕士论文电子期刊网》;全文 *

Also Published As

Publication number Publication date
CN112243096A (zh) 2021-01-19

Similar Documents

Publication Publication Date Title
CN1306827C (zh) 图像处理设备、图像处理方法及图像捕获设备
US7777804B2 (en) High dynamic range sensor with reduced line memory for color interpolation
CN1278427C (zh) 固态图象读取装置及其驱动方法和摄像***
US8169514B2 (en) Defective pixel detecting device, defective pixel detecting method, record medium storing a program for detecting defective pixels, and imaging apparatus
US8031232B2 (en) Image pickup apparatus including a first image formation system and a second image formation system, method for capturing image, and method for designing image pickup apparatus
RU2619721C2 (ru) Устройство захвата изображений, система захвата изображений и способ управления для устройства захвата изображений
CN1292599C (zh) 用于将包含相同颜色分量的信号相加的成像设备
US10200593B2 (en) Image capturing apparatus and control method thereof
CN113170061B (zh) 图像传感器、成像装置、电子设备、图像处理***及信号处理方法
US20070165121A1 (en) Image capturing apparatus and image capturing system
US8830384B2 (en) Imaging device and imaging method
CN103460687A (zh) 固态摄像装置以及摄像设备
US20090097743A1 (en) Method and apparatus providing hardware-efficient demosaicing of image data
US8665353B2 (en) Solid-state image pickup apparatus and method for driving the same
US20130322755A1 (en) Image processing method and apparatus
CN112243095B (zh) 像素合成模式下的pd像素的读取方法及装置、存储介质、图像采集设备
CN112243096B (zh) 像素合成模式下的像素读取方法及装置、存储介质、图像采集设备
JP2010130238A (ja) 欠陥補正回路及びそれを備えた撮像装置
CN115280766B (zh) 图像传感器、成像装置、电子设备、图像处理***及信号处理方法
US20120092539A1 (en) Image Pickup Apparatus
US9883123B2 (en) Solid-state imaging device and imaging system using a bit reduction method based on a reduced pixel signal
JP5446955B2 (ja) 撮像装置
US20090147093A1 (en) Color processing circuit
JPWO2010146749A1 (ja) 撮像装置
JP2011041039A (ja) 撮像装置およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant