CN109743891B - 图像传感电路以及图像深度传感*** - Google Patents
图像传感电路以及图像深度传感*** Download PDFInfo
- Publication number
- CN109743891B CN109743891B CN201780000972.2A CN201780000972A CN109743891B CN 109743891 B CN109743891 B CN 109743891B CN 201780000972 A CN201780000972 A CN 201780000972A CN 109743891 B CN109743891 B CN 109743891B
- Authority
- CN
- China
- Prior art keywords
- photosensitive
- reference pixel
- pixel
- circuit
- photosensitive pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000001902 propagating effect Effects 0.000 claims description 4
- 238000005286 illumination Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 10
- 230000008054 signal transmission Effects 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 3
- 239000000872 buffer Substances 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/705—Pixels for depth measurement, e.g. RGBZ
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4861—Circuits for detection, sampling, integration or read-out
- G01S7/4863—Detector arrays, e.g. charge-transfer gates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4865—Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/497—Means for monitoring or calibrating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4023—Scaling of whole images or parts thereof, e.g. expanding or contracting based on decimating pixels or lines of pixels; based on inserting pixels or lines of pixels
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/617—Noise processing, e.g. detecting, correcting, reducing or removing noise for reducing electromagnetic interference, e.g. clocking noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
- H04N25/673—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction by using reference sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
- H04N25/745—Circuitry for generating timing or clock signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/7795—Circuitry for generating timing or clock signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
- H04N5/2226—Determination of depth image, e.g. for foreground/background separation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Electromagnetism (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Measurement Of Optical Distance (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Solid State Image Pick-Up Elements (AREA)
Abstract
本发明提供了一种图像传感电路,包括感光像素阵列,包括复数个感光像素串行,所述感光像素阵列输出复数个像素值;参考像素阵列,所述参考像素阵列包括至少一参考像素串行,所述至少一参考像素串行中一参考像素串行包括复数个参考像素电路,所述参考像素串行的第一端接收一时钟信号,所述参考像素阵列输出所述复数个参考像素电路所接收的复数个接收时钟信号与所述时钟信号之间的复数个相位差;以及影像深度判断单元,耦接于所述感光像素阵列以及所述参考像素阵列,用来根据所述复数个像素值以及所述复数个相位差,判断影像深度。
Description
技术领域
本发明涉及一种图像传感电路以及图像深度传感***,尤其涉及一种可降低时钟信号相位差所造成影响的图像传感电路及图像深度传感***。
背景技术
3D图像传感***可采集其相对于目标物的距离/深度信息,并因此通过3D图像各个像素的间距值或距离值生成三维图像数据,所述3D图像也被称为距离图像或深度图。额外的距离维度可在多种应用中使用,以获取更多有关由相机所捕获的场景中对象的信息,从而解决工业传感器领域中的不同任务。
一般来说,3D图像传感电路透过发光二极管来发射入射光,并利用像素阵列中的复数个像素电路来采集对应于入射光且反射自目标物的反射光,并藉由比较入射光与反射光之间的光程差,可计算(设置有3D图像传感电路的)电子装置与目标物之间的距离/深度。然而,当像素阵列很大时,输入至像素阵列的时钟信号于像素阵列中会产生相位差,而导致3D图像传感电路在计算电子装置与目标物之间的距离/深度时产生误差。
因此,现有技术实有改进的必要。
发明内容
因此,本发明的主要目的即在于提供一种可降低时钟信号相位差所造成影响的图像传感电路及图像深度传感***,以改善现有技术的缺点。
为了解决上述技术问题,本发明提供了一种图像传感电路,包括感光像素阵列,包括复数个感光像素串行,其中所述复数个感光像素串行中一感光像素串行包括复数个感光像素电路,所述感光像素串行的第一端接收时钟信号,所述时钟信号由所述感光像素串行的所述第一端传播(Propagate)至所述感光像素串行的第二端,所述感光像素阵列输出复数个像素值;参考像素阵列,包括至少一参考像素串行,所述至少一参考像素串行中一参考像素串行包括复数个参考像素电路,所述参考像素串行的第一端接收所述时钟信号,所述时钟信号由所述参考像素串行的所述第一端传播至所述参考像素串行的第二端,所述参考像素阵列输出所述复数个参考像素电路所接收的复数个接收时钟信号与所述时钟信号之间的复数个相位差;以及影像深度判断单元,耦接于所述感光像素阵列以及所述参考像素阵列,用来根据所述复数个像素值以及所述复数个相位差,判断影像深度
较佳地,所述复数个感光像素串行相互平行,所述至少一参考像素串行平行于所述复数个感光像素串行。
较佳地,所述感光像素阵列的每一感光像素电路包括感光组件,所述参考像素阵列的每一参考像素电路不包括感光组件。
较佳地,所述参考像素阵列不接受外来光照。
较佳地,所述参考像素阵列相邻设置于所述感光像素阵列的一边。
本发明另提供了一种图像深度传感***,包括发光单元,用来发射入射光;以及图像传感电路,包括感光像素阵列,包括复数个感光像素串行,其中所述复数个感光像素串行中一感光像素串行包括复数个感光像素电路,所述感光像素串行的第一端接收时钟信号,所述时钟信号由所述感光像素串行的所述第一端传播至所述感光像素串行的第二端,所述感光像素阵列输出复数个像素值;参考像素阵列,包括至少一参考像素串行,所述至少一参考像素串行中一参考像素串行包括复数个参考像素电路,所述参考像素串行的第一端接收所述时钟信号,所述时钟信号由所述参考像素串行的所述第一端传播至所述参考像素串行的第二端,所述参考像素阵列输出所述复数个参考像素电路所接收的复数个接收时钟信号与所述时钟信号之间的复数个相位差;以及影像深度判断单元,耦接于所述感光像素阵列以及所述参考像素阵列,用来根据所述复数个像素值以及所述复数个相位差,判断影像深度。
本发明利用不受光的参考像素阵列来纪录时钟信号因传导而造成的相位延迟/相位差,并于计算影像深度时,将感光像素阵列所经历到的相位差补偿回来,以解决现有技术中计算影像深度时受到时钟信号相位差影响的缺点。
附图说明
图1为本发明实施例一图像深度传感***的示意图。
图2为本发明实施例一图像传感电路的示意图。
图3为本发明实施例一延迟拴锁回路的示意图。
图4为本发明实施例一延迟拴锁单元的示意图。
图5为一像素阵列的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在说明书以及权利要求中,「耦接」一词是指包含任何直接或间接的电气连接手段,「电性连接」一词是指直接电性连接。
请参考图1,图1为本发明实施例一图像深度传感***10的示意图。图像深度传感***10可为三维图像传感(Three Dimensional Image Sensor)***,可根据射线/光的飞行时间(Time of Flight,ToF)感测其相对于目标物(未绘示于图1)的距离/深度,以建构该目标物的三维图像。图像深度传感***10包括发光单元12以及图像传感电路14,发光单元12可为不可见光发光二极管(Light Emitting Diode,LED),如红外线发光二极管。发光单元12用来发射入射光,而图像传感电路14可接收对应于该入射光的反射光。
详细来说,请参考图1及图2,图2为本发明实施例图像传感电路14的示意图。图像传感电路14包括感光像素阵列(Pixel Array)140、时钟信号产生电路142、参考像素阵列144以及影像深度判断单元146(图2中未示出)。图像传感电路14利用感光像素阵列140接收对应于该入射光的反射光,感光像素阵列140输出复数个像素值。另外,参考像素阵列144不接受外来光照,于一实施例中,可于参考像素阵列144的上方设置不透光的盖板,使得参考像素阵列144不接受外来光照,而参考像素阵列144用来纪录复数个相位差(其详述于后),影像深度判断单元146耦接于感光像素阵列140以及参考像素阵列144,用来接收感光像素阵列140所输出的复数个像素值以及参考像素阵列144所输出的复数个相位差,并根据该复数个像素值以及该复数个相位差,判断影像深度。
详细来说,感光像素阵列140包括复数个感光像素串行PXS,感光像素串行PXS可为位于感光像素阵列140的一列(Column)或一行(Row)感光像素,其包括复数个感光像素电路PX_1~PX_M,每一感光像素电路PX_m包括一感光组件(其中感光组件可为感光二极管(Photo Diode)或感光二极管(PhotoTransistor),其中感光组件可视为一光控电流源(Light-Control Current Source))。复数个感光像素串行PXS彼此之间相互平行。其中,感光像素电路PX_1为位于感光像素串行PXS的第一端(Terminal/End)的感光像素电路,而感光像素电路PX_M为位于感光像素串行PXS的第二端的感光像素电路,感光像素电路PX_1为感光像素电路PX_1~PX_M中首先接收到时钟信号CK的感光像素电路,换句话说,时钟信号CK由感光像素串行PXS的第一端/感光像素电路PX_1传播(Propagate)至感光像素串行PXS的第二端/感光像素电路PX_M。
另外,参考像素阵列144相邻设置于感光像素阵列140的一边,参考像素阵列144包括至少一参考像素串行RPXS,参考像素串行RPXS平行于感光像素串行PXS,其包括复数个参考像素电路RPX_1~RPX_M,每一参考像素电路RPX_m可不包括任何感光组件。具体来说,参考像素电路RPX_m可与感光像素电路PX_m具有相似的电路结构,与感光像素电路PX_m不同的是,参考像素电路RPX_m不具备感光像素电路PX_m中的感光组件,而是利用压控电流源(Voltage-Control Current Source)取代感光像素电路PX_m中的感光组件。同样地,参考像素电路RPX_1为位于参考像素串行RPXS的第一端的参考像素电路,而参考像素电路PX_M为位于参考像素串行RPXS的第二端的参考像素电路,参考像素电路RPX_1为参考像素电路RPX_1~RPX_M中首先接收到时钟信号CK的感光像素电路,换句话说,时钟信号CK由参考像素串行PXS的第一端/参考像素电路RPX_1传播至参考像素串行PXS的第二端/参考像素电路RPX_M。
一般来说,时钟信号CK传导于时钟信号传输导线上。换句话说,感光像素串行PXS可包含时钟信号传输导线PXTL,而时钟信号CK由感光像素串行PXS的第一端/感光像素电路PX_1藉由时钟信号传输导线PXTL传播(Propagate)至感光像素串行PXS的第二端/感光像素电路PX_M。同样地,参考像素串行RPXS可包含时钟信号传输导线PXTL’,时钟信号CK由参考像素串行PXS的第一端/参考像素电路RPX_1藉由时钟信号传输导线PXTL’传播至参考像素串行PXS的第二端/参考像素电路RPX_M。
由于时钟信号CK传导于时钟信号传输导线PXTL具有传播延迟(PropagationDelay),使得同一感光像素串行PXS的感光像素电路PX_1~PX_M实际接收到的时钟信号(简称接收时钟信号)相对于未经传播延迟的时钟信号CK具有相位差而相位差会对距离/深度计算的造成影响,而增加计算距离/深度时的误差。
另外,时钟信号CK传导于时钟信号传输导线PXTL’亦具有传播延迟,使得参考像素串行RPXS的参考像素电路RPX_1~RPX_M实际接收到的接收时钟信号相对于未经传播延迟的时钟信号CK具有相位差于一实施例中,时钟信号传输导线PXTL与时钟信号传输导线PXTL’可为相同的传输介质而具有相通的信号传导特性,而时钟信号CK抵达参考像素电路RPX_1~RPX_M所经的传输距离与时钟信号CK抵达感光像素电路PX_1~PX_M所经的传输距离相同,使得相位差与相位差相同。
在此情形下,为了降低相位差会对距离/深度计算的造成影响,图像传感电路14利用参考像素阵列144来取得相位差并将相关于相位差的信息输出至影像深度判断单元146,影像深度判断单元146可根据相位差于计算影像深度时,将感光像素电路PX_1~PX_M所经历到的相位差补偿回来,而使得影像深度的判断更为精准。换句话说,影像深度判断单元146可根据感光像素阵列140所输出的复数个像素值以及参考像素阵列144所输出的相位差判断影像深度,使得影像深度的判断更为精准。
另外,如图2所示,感光像素串行PXS透过延迟拴锁回路(Delay Lock Loop,DLL)148a耦接于时钟信号产生电路142,延迟拴锁回路148a自时钟信号产生电路142接收时钟信号CK’,并根据时钟信号CK’产生时钟信号CK。需注意的是,延迟拴锁回路148a可将时钟信号的延迟锁住,而使通过延迟拴锁回路148a输入至感光像素阵列140中每一个感光像素串行PXS的时钟信号CK皆具有相同的延迟/相位。另外,另一延迟拴锁回路148b自时钟信号产生电路142接收时钟信号CK”,并根据时钟信号CK’’产生参考时钟信号RCK,并将参考时钟信号RCK输入至参考像素电路RPX_1~RPX_M。同样地。延迟拴锁回路148b可将时钟信号的延迟锁住,而使延迟拴锁回路148b输入至每一个参考像素串行RPX_m的参考时钟信号RCK皆具有相同的延迟/相位。
延迟拴锁回路148a与延迟拴锁回路148b可具有相同的电路结构,其电路结构为本领域技术人员所公知,故简述如下。请参考图3及图4,图3为本发明实施例延迟拴锁回路348的示意图,图4为本发明实施例延迟拴锁单元DLL的示意图。延迟拴锁回路348可用来实现延迟拴锁回路148a。延迟拴锁回路348包括复数个缓冲器BF以及复数个延迟拴锁单元DLL,延迟拴锁单元DLL具有输入端in、ref以及输出端out,延迟拴锁单元DLL用来锁住延迟/相位,使得延迟拴锁单元DLL于输出端out输出的信号与于输入端ref所输入的信号具有相同的延迟/相位,其详细电路结构可参考图4。如此一来,延迟拴锁回路348可确保每一个延迟拴锁单元DLL所输出的时钟信号CK皆具有相同的延迟/相位。另外,延迟拴锁回路348亦可用来实现延迟拴锁回路148b,其操作原理可参考前述段落,于此不再赘述。
由上述可知,图像传感电路14利用参考像素阵列144来取得相位差 由于相位差与相位差相同,因此可于计算影像深度时,利用参考像素阵列144所产生的相位差将感光像素电路PX_1~PX_M所经历到的相位差补偿回来,而使得影像深度的判断更为精准。
相较之下,请参考图5,图5为现有像素阵列540的示意图。像素阵列540中对应于像素电路PX_1~PX_M的接收时钟信号相对于未经传播延迟的时钟信号CK具有相位差现有技术中并未针对相位差进行补偿,而使得相位差对距离/深度计算的产生影响,反而增加计算距离/深度时的误差。
综上所述,本发明利用不受光(或不具有感光组件)的参考像素阵列来纪录时钟信号因传导而造成的相位延迟/相位差,并于计算影像深度时,将感光像素阵列所经历到的相位差补偿回来,而使得影像深度的判断更为精准。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包括在本发明的保护范围之内。
Claims (8)
1.一种图像传感电路,其特征在于,所述图像传感电路包括:
感光像素阵列,包括复数个感光像素串行,其中所述复数个感光像素串行中一感光像素串行包括复数个感光像素电路,所述感光像素串行的第一端的一感光像素电路接收时钟信号,所述时钟信号由所述感光像素串行的所述第一端的所述感光像素电路传播至所述感光像素串行的第二端的一感光像素电路,所述感光像素阵列输出复数个像素值,其中所述复数个像素值包括复数个深度值,所述复数个深度值根据所述复数个感光像素电路所接收的各别接收时钟信号来决定;
参考像素阵列,包括复数个参考像素串行,所述复数个参考像素串行中一参考像素串行包括复数个参考像素电路,所述参考像素串行的第一端的一参考像素电路接收所述时钟信号,所述时钟信号由所述参考像素串行的所述第一端的所述参考像素电路传播至所述参考像素串行的第二端的一参考像素电路,其中所述复数个感光像素串行相互平行,所述复数个参考像素串行平行于所述复数个感光像素串行,所述复数个参考像素串行的所述复数个参考像素电路的每一参考像素电路对应至所述复数个感光像素串行的每一感光像素串行的一感光像素电路,所述每一参考像素电路具有的时钟信号的传播延迟相同于所述每一感光像素串行的对应的感光像素电路,所述参考像素阵列输出所述复数个参考像素电路所接收的复数个接收时钟信号与所述时钟信号之间因传播延迟所造成的复数个相位差,所述复数个参考像素电路所接收的所述复数个接收时钟信号与所述时钟信号之间因传播延迟所造成的所述复数个相位差代表对应至所述每一参考像素电路的所述时钟信号的传播延迟;以及
影像深度判断单元,耦接于所述感光像素阵列以及所述参考像素阵列,用来根据所述复数个深度值以及所述复数个相位差,判断影像深度。
2.如权利要求1所述的图像传感电路,其特征在于,所述感光像素阵列的每一感光像素电路包括感光组件,所述参考像素阵列的每一参考像素电路不包括感光组件。
3.如权利要求1所述的图像传感电路,其特征在于,所述参考像素阵列不接受外来光照。
4.如权利要求1所述的图像传感电路,其特征在于,所述参考像素阵列相邻设置于所述感光像素阵列的一边。
5.一种图像深度传感***,其特征在于,包括:
发光单元,用来发射入射光;以及
图像传感电路,包括:
感光像素阵列,包括复数个感光像素串行,其中所述复数个感光像素串行中一感光像素串行包括复数个感光像素电路,所述感光像素串行的第一端的一感光像素电路接收时钟信号,所述时钟信号由所述感光像素串行的所述第一端的所述感光像素电路传播至所述感光像素串行的第二端的一感光像素电路,所述感光像素阵列输出复数个像素值,其中所述复数个像素值包括复数个深度值,所述复数个深度值根据所述复数个感光像素电路所接收的各别接收时钟信号来决定;
参考像素阵列,包括复数个参考像素串行,所述复数个参考像素串行中一参考像素串行包括复数个参考像素电路,所述参考像素串行的第一端的一参考像素电路接收所述时钟信号,所述时钟信号由所述参考像素串行的所述第一端的所述参考像素电路传播至所述参考像素串行的第二端的一参考像素电路,其中所述复数个感光像素串行相互平行,所述复数个参考像素串行平行于所述复数个感光像素串行,所述复数个参考像素串行的所述复数个参考像素电路的每一参考像素电路对应至所述复数个感光像素串行的每一感光像素串行的一感光像素电路,所述每一参考像素电路具有的时钟信号的传播延迟相同于所述每一感光像素串行的对应的感光像素电路,所述参考像素阵列输出所述复数个参考像素电路所接收的复数个接收时钟信号与所述时钟信号之间因传播延迟所造成的复数个相位差,所述复数个参考像素电路所接收的所述复数个接收时钟信号与所述时钟信号之间因传播延迟所造成的所述复数个相位差代表对应至所述每一参考像素电路的所述时钟信号的传播延迟;以及
影像深度判断单元,耦接于所述感光像素阵列以及所述参考像素阵列,用来根据所述复数个深度值以及所述复数个相位差,判断影像深度。
6.如权利要求5所述的图像深度传感***,其特征在于,所述感光像素阵列的每一感光像素电路包括感光组件,所述参考像素阵列的每一参考像素电路不包括感光组件。
7.如权利要求5所述的图像深度传感***,其特征在于,所述参考像素阵列不接受外来光照。
8.如权利要求5所述的图像深度传感***,其特征在于,所述参考像素阵列相邻设置于所述感光像素阵列的一边。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110390402.7A CN113099072B (zh) | 2017-08-18 | 2017-08-18 | 图像传感电路以及图像深度传感*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2017/097980 WO2019033382A1 (zh) | 2017-08-18 | 2017-08-18 | 图像传感电路以及图像深度传感*** |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110390402.7A Division CN113099072B (zh) | 2017-08-18 | 2017-08-18 | 图像传感电路以及图像深度传感*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109743891A CN109743891A (zh) | 2019-05-10 |
CN109743891B true CN109743891B (zh) | 2021-06-25 |
Family
ID=65361285
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780000972.2A Active CN109743891B (zh) | 2017-08-18 | 2017-08-18 | 图像传感电路以及图像深度传感*** |
CN202110390402.7A Active CN113099072B (zh) | 2017-08-18 | 2017-08-18 | 图像传感电路以及图像深度传感*** |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110390402.7A Active CN113099072B (zh) | 2017-08-18 | 2017-08-18 | 图像传感电路以及图像深度传感*** |
Country Status (5)
Country | Link |
---|---|
US (1) | US10523849B2 (zh) |
EP (1) | EP3462730B1 (zh) |
KR (1) | KR101980722B1 (zh) |
CN (2) | CN109743891B (zh) |
WO (1) | WO2019033382A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021016781A1 (zh) | 2019-07-29 | 2021-02-04 | 深圳市汇顶科技股份有限公司 | 三维图像传感器以及相关三维图像传感模组及手持装置 |
WO2022087776A1 (zh) * | 2020-10-26 | 2022-05-05 | 深圳市汇顶科技股份有限公司 | 飞行时间传感器、测距***及电子装置 |
CN111965660B (zh) * | 2020-10-26 | 2021-02-23 | 深圳市汇顶科技股份有限公司 | 飞行时间传感器、测距***及电子装置 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0832877A (ja) * | 1994-07-14 | 1996-02-02 | Matsushita Electric Ind Co Ltd | 固体撮像装置および固体撮像素子の駆動方法 |
JP2008032877A (ja) | 2006-07-27 | 2008-02-14 | Nikon Corp | 自動焦点検出装置 |
JP2010041460A (ja) | 2008-08-06 | 2010-02-18 | Renesas Technology Corp | 固体撮像装置 |
JP5335327B2 (ja) * | 2008-08-29 | 2013-11-06 | キヤノン株式会社 | 欠陥検出補正装置及び欠陥検出補正方法 |
KR101646908B1 (ko) * | 2009-11-27 | 2016-08-09 | 삼성전자주식회사 | 거리 정보를 감지할 수 있는 이미지 센서 |
KR101788032B1 (ko) * | 2011-03-24 | 2017-10-19 | 삼성전자주식회사 | 깊이 센서, 상기 깊이 센서의 깊이 정보 에러 보상 방법, 및 상기 깊이 센서를 포함하는 신호 처리 시스템 |
CN103595410A (zh) * | 2012-08-17 | 2014-02-19 | 联咏科技股份有限公司 | 图像传感器及其列模数转换器 |
JP2014124493A (ja) * | 2012-12-27 | 2014-07-07 | Olympus Medical Systems Corp | 内視鏡システム |
KR102007279B1 (ko) * | 2013-02-08 | 2019-08-05 | 삼성전자주식회사 | 3차원 이미지 센서의 거리 픽셀, 이를 포함하는 3차원 이미지 센서 및 3차원 이미지 센서의 거리 픽셀의 구동 방법 |
US20140347442A1 (en) * | 2013-05-23 | 2014-11-27 | Yibing M. WANG | Rgbz pixel arrays, imaging devices, controllers & methods |
KR102061699B1 (ko) * | 2013-06-19 | 2020-01-02 | 삼성전자주식회사 | 이미지 센서, 이를 포함하는 이미지 처리 시스템 및 이의 동작 방법 |
TWI528810B (zh) * | 2013-10-07 | 2016-04-01 | 恆景科技股份有限公司 | 影像感測器以及影像感測方法 |
WO2015119243A1 (ja) * | 2014-02-07 | 2015-08-13 | 国立大学法人静岡大学 | イメージセンサ |
CN104980605B (zh) * | 2014-04-11 | 2018-07-03 | 山东新北洋信息技术股份有限公司 | 图像读取设备和用于图像读取设备的相位差校正方法 |
JP6397033B2 (ja) | 2014-08-29 | 2018-09-26 | オリンパス株式会社 | 撮像装置および撮像システム |
US10061029B2 (en) | 2015-01-06 | 2018-08-28 | Samsung Electronics Co., Ltd. | Correction of depth images from T-O-F 3D camera with electronic-rolling-shutter for light modulation changes taking place during light integration |
US9819930B2 (en) * | 2015-05-26 | 2017-11-14 | Omnivision Technologies, Inc. | Time of flight imaging with improved initiation signaling |
CN105609516B (zh) * | 2015-12-18 | 2019-04-12 | Oppo广东移动通信有限公司 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
CN106027881B (zh) * | 2016-05-10 | 2019-05-10 | 天津大学 | 图像传感器列延时导致图像失真恢复方法 |
US10527728B2 (en) * | 2017-01-27 | 2020-01-07 | Samsung Electronics Co., Ltd | Apparatus and method for range measurement |
-
2017
- 2017-08-18 WO PCT/CN2017/097980 patent/WO2019033382A1/zh unknown
- 2017-08-18 KR KR1020177033789A patent/KR101980722B1/ko active IP Right Grant
- 2017-08-18 CN CN201780000972.2A patent/CN109743891B/zh active Active
- 2017-08-18 EP EP17804786.6A patent/EP3462730B1/en active Active
- 2017-08-18 CN CN202110390402.7A patent/CN113099072B/zh active Active
- 2017-11-15 US US15/813,156 patent/US10523849B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP3462730A4 (en) | 2019-04-03 |
WO2019033382A1 (zh) | 2019-02-21 |
KR20190035451A (ko) | 2019-04-03 |
KR101980722B1 (ko) | 2019-08-28 |
US20190058812A1 (en) | 2019-02-21 |
CN113099072A (zh) | 2021-07-09 |
CN109743891A (zh) | 2019-05-10 |
CN113099072B (zh) | 2023-09-26 |
US10523849B2 (en) | 2019-12-31 |
EP3462730B1 (en) | 2020-05-13 |
EP3462730A1 (en) | 2019-04-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109743891B (zh) | 图像传感电路以及图像深度传感*** | |
US11652975B2 (en) | Field calibration of stereo cameras with a projector | |
US11828850B2 (en) | 3D image sensor and related 3D image sensing module and hand-held device | |
US7924411B2 (en) | 3-D imaging system | |
US20180059218A1 (en) | Time of flight-based systems operable for ambient light and distance or proximity measurements | |
US20180038945A1 (en) | Single spad array ranging system | |
US20180247422A1 (en) | Method and apparatus for depth-map estimation of a scene | |
CN111580120A (zh) | 飞行时间tof装置和电子设备 | |
CN111580118A (zh) | 飞行时间tof装置的发射模组 | |
US20070146327A1 (en) | Optical mouse and an optical structure of the optical mouse | |
CN109804426B (zh) | 图像传感电路及图像深度传感*** | |
TW202122823A (zh) | 飛行時間感測系統和其中使用的圖像感測器 | |
US20190277948A1 (en) | Optical distance measuring sensor | |
JP2010002280A (ja) | 撮像装置、測距装置及び視差算出方法 | |
CN213210470U (zh) | 飞行时间tof装置的发射模组 | |
US11778161B2 (en) | TOF camera device and method of driving the same | |
WO2019196049A1 (zh) | 影像传感***及电子装置 | |
CN113645371A (zh) | 飞行时间传感器行方向相位固定模式噪声消除装置和方法 | |
KR20240088252A (ko) | 이미지 처리 시스템 및 이미지 처리 방법 | |
JP3420782B2 (ja) | 物体計測装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |