CN118233770A - 动态视觉传感器 - Google Patents
动态视觉传感器 Download PDFInfo
- Publication number
- CN118233770A CN118233770A CN202311679409.6A CN202311679409A CN118233770A CN 118233770 A CN118233770 A CN 118233770A CN 202311679409 A CN202311679409 A CN 202311679409A CN 118233770 A CN118233770 A CN 118233770A
- Authority
- CN
- China
- Prior art keywords
- signal
- output
- vision sensor
- dynamic vision
- column
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 claims description 13
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 28
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 15
- 238000000034 method Methods 0.000 description 14
- 102100029469 WD repeat and HMG-box DNA-binding protein 1 Human genes 0.000 description 10
- 101710097421 WD repeat and HMG-box DNA-binding protein 1 Proteins 0.000 description 10
- 230000015654 memory Effects 0.000 description 8
- 230000004044 response Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 230000007423 decrease Effects 0.000 description 4
- 230000003936 working memory Effects 0.000 description 4
- 108010077333 CAP1-6D Proteins 0.000 description 3
- 101000897856 Homo sapiens Adenylyl cyclase-associated protein 2 Proteins 0.000 description 3
- 101000836079 Homo sapiens Serpin B8 Proteins 0.000 description 3
- 101000798702 Homo sapiens Transmembrane protease serine 4 Proteins 0.000 description 3
- 102100029500 Prostasin Human genes 0.000 description 3
- 102100032471 Transmembrane protease serine 4 Human genes 0.000 description 3
- 239000003990 capacitor Substances 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 108010031970 prostasin Proteins 0.000 description 3
- 229920001621 AMOLED Polymers 0.000 description 2
- 101100192841 Caenorhabditis elegans pxn-2 gene Proteins 0.000 description 1
- 244000137850 Marrubium vulgare Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 101150109127 pxn1 gene Proteins 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/766—Addressed sensors, e.g. MOS or CMOS sensors comprising control or output lines used for a plurality of functions, e.g. for pixel output, driving, reset or power
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/47—Image sensors with pixel address output; Event-driven image sensors; Selection of pixels to be read out based on image data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
- H04N25/771—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising storage means other than floating diffusion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
- H04N25/778—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising amplifiers shared between a plurality of pixels, i.e. at least one part of the amplifier must be on the sensor array itself
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
提供了一种动态视觉传感器。该动态视觉传感器包括:像素阵列,其包括按照多行和多列布置的多个像素,其中,多个像素中的每一个被配置为检测入射光的强度的变化;以及读出电路,其被配置为在合并操作的第一部分中同时选择多列中的第一目标列的第一像素,并且基于从第一像素同时输出的第一事件信号生成并输出第一合并像素组的第一合并事件信号。
Description
相关申请的交叉引用
本申请要求于2022年12月20日在韩国知识产权局提交的韩国专利申请No.10-2022-0179808的优先权,该申请的公开以引用方式全文并入本文中。
技术领域
本公开涉及一种动态视觉传感器,并且更具体地,涉及一种包括读出电路的动态视觉传感器。
背景技术
互补金属氧化物半导体(CMOS)图像传感器和动态视觉传感器是不同类型的图像传感器。CMOS图像传感器将捕获的图像照原样提供给处理器,但是需要大量的数据处理。动态视觉传感器可以通过仅检测光的强度变化的事件,并将检测到的事件提供给处理器来减少要处理的数据量。
需要支持图像装置的相对低速帧操作和相对高速帧操作两者的动态视觉传感器。然而,相关的动态视觉传感器不能支持相对高速帧操作。
发明内容
一个或多个示例实施例提供了一种能够通过在正常模式和合并模式中的任何一个中操作来支持图像装置的低速帧操作和高速帧操作二者的读出电路以及包括该读出电路的动态视觉传感器。
根据示例实施例的一方面,一种动态视觉传感器包括:像素阵列,其具有按照多行和多列布置的多个像素,其中,多个像素中的每一个被配置为检测入射光的强度的变化;以及读出电路,其被配置为在合并操作的第一部分中同时选择多列中的第一目标列的第一像素,并且基于从第一像素同时输出的第一事件信号生成并输出第一合并像素组的第一合并事件信号。
根据示例实施例的另一方面,一种动态视觉传感器包括:第一动态视觉传感器(DVS)像素,其连接到第一列线、第一导通行线和第一截止行线;第二DVS像素,其连接到第一列线、第二导通行线和第二截止行线;第三DVS像素,其连接到第二列线、第一导通行线和第一截止行线;第四DVS像素,其连接到第二列线、第二导通行线和第二截止行线;第一读出子电路,其包括第一复用器,第一复用器被配置为基于动态视觉传感器的模式从施加到第一列线的第一列选择信号和第二列选择信号中选择选择的信号,并将选择的信号输出到第二列线;以及第二读出子电路,其包括:第一或门,其通过输入连接到第一导通行线和第二导通行线;第二复用器,其被配置为基于模式选择并输出第一或门的输出和第一导通行线的信号中的一个;第二或门,其通过输入连接到第一截止行线和第二截止行线;第三复用器,其被配置为基于模式选择并输出第二或门的输出和第一截止行线的信号中的一个;第一与门,其被配置为基于模式选择性地输出第二导通行线的信号;以及第二与门,其被配置为基于模式选择性地输出第二截止行线的信号。
另外,根据示例实施例的另一方面,一种动态视觉传感器包括:像素阵列,其包括按照多行和多列布置的多个像素,其中,多个像素中的每一个被配置为检测入射光的强度的变化;以及读出电路,其被配置为在合并操作中以列为单位顺序地选择多个像素的合并像素组,并且基于从合并像素组输出的多个事件信号来生成并输出合并像素组的合并事件信号。
附图说明
通过下面结合附图对示例实施例的描述,上述和其它方面和特征将变得更加明显,在附图中:
图1是根据示例实施例的图像装置的示意框图;
图2是示出根据示例实施例的操作动态视觉传感器的方法的流程图;
图3A和图3B是具体示出根据示例实施例的动态视觉传感器的框图;
图4是具体示出根据示例实施例的动态视觉传感器的框图;
图5A、图5B和图5C分别是示出根据示例实施例的合并像素组的示图;
图6A是示出根据示例实施例的操作动态视觉传感器的方法的流程图,并且图6B是示出根据图6A的多种类型的合并模式的合并像素组的示图;
图7A是示出根据示例实施例的动态视觉传感器的像素的结构的示图,并且图7B是具体示出图7A的事件检测电路的示图;
图8是根据示例实施例的动态视觉传感器的详细框图;
图9A是用于解释图8的动态视觉传感器在合并模式的第一部分中的操作的示图,并且图9B是用于解释图8的动态视觉传感器在合并模式的第二部分中的操作的示图;
图10A是用于解释图8的动态视觉传感器在正常模式的第一部分中的操作的示图,并且图10B是用于解释图8的动态视觉传感器在正常模式的第二部分中的操作的示图;
图11是根据示例实施例的动态视觉传感器的详细框图;
图12是示出根据示例实施例的在合并模式中操作动态视觉传感器的方法的流程图;以及
图13是示出根据示例实施例的电子装置的框图。
具体实施方式
将参照附图描述示例实施例。在本文中描述的实施例作为示例被提供,并且因此,本公开不限于此,并且可以以各种其它的形式实施。在以下描述中提供的每个示例实施例不排除与也在本文中提供或不在本文中提供但与本公开一致的另一示例或另一实施例的一个或多个特征相关联。参考诸如部分、部、单元、模块、块、具有诸如在详细描述中使用的“…件”和“…器”的后缀的装置的术语描述的组件以及在附图中示出的功能块可以以软件、硬件或它们的组合来实施。例如,软件可以是机器代码、固件、嵌入式代码和应用软件。例如,硬件可以包括电路、电子电路、处理器、计算机、集成电路、集成电路核心、压力传感器、惯性传感器、微机电***(MEMS)、无源装置或它们的组合。此外,描述为连接到第二组件的第一组件包括两个组件与放置在其中间的第三组件连接的情况。
图1是根据示例实施例的图像装置10的示意框图。
参照图1,图像装置10可以包括事件数据处理器20和动态视觉传感器100。事件数据处理器20可以处理从动态视觉传感器100输出的事件数据EVT_DATA,以生成事件包EVT_P。在一些示例实施例中,事件数据处理器20可以被称为事件信号处理器。
事件数据处理器20可以对事件数据EVT_DATA执行各种处理。例如,事件数据处理器20可以使用动态视觉传感器100的像素阵列110的像素的时间戳值的时间相关性来校正噪声像素、热像素或死像素的时间戳值。
在示例实施例中,图像装置10可以基于事件包EVT_P生成图像。
在示例实施例中,动态视觉传感器100可以包括像素阵列110和读出电路120。像素阵列110可以包括以多行和多列布置的像素。动态视觉传感器100的像素的结构可以与一般CMOS图像传感器的像素的结构不同。将参照图7A、图7B和图11详细描述应用与示例实施例一致的像素的结构。像素阵列110可以通过感测入射在每个像素上的光的强度的变化生成每个像素的事件信号。
事件信号可以包括导通事件(on-event)信号和截止(off-event)事件信号。例如,当像素的光强度增加超过参考值时,与像素相对应的事件信号可以包括逻辑高(H)的导通事件信号和逻辑低(L)的截止事件信号。例如,当像素的光强度降低超过参考值时,与像素相对应的事件信号可以包括逻辑低(L)的导通事件信号和逻辑高(H)的截止事件信号。例如,当像素的光强度增加小于参考值或降低小于参考值时,与像素相对应的事件信号可以包括逻辑低(L)的导通事件信号和逻辑低(L)的截止事件信号。然而,这是作为示例提供的,并且示例实施例不限于此。根据像素阵列110和读出电路120的结构,导通事件信号和截止事件信号可以具有各种逻辑值。
作为示例,读出电路120可以基于从事件数据处理器20接收的模式控制信号CS_MODE在正常模式或合并(binning)模式中操作,以从像素阵列110读出事件信号。例如,事件数据处理器20可以将合并模式控制信号提供到动态视觉传感器100,使得读出电路120在合并模式中操作以用于高速帧操作。例如,事件数据处理器20可以将正常模式控制信号提供到动态视觉传感器100,使得读出电路120在正常模式中操作以用于低速帧操作。
作为示例,读出电路120可以在合并模式中以列组(列组中的每一组包括至少两列)为单位或者以行组(行组中的每一组包括至少两行)为单位顺序地选择像素阵列110的像素。读出电路120可以从像素阵列110接收与所选择的像素相对应的事件信号,并且根据接收的事件信号生成合并像素组的合并事件信号,并且输出生成的合并事件信号。如本文所使用,可以通过在合并模式中对至少四个像素进行分组来定义合并像素组,并且可以针对合并像素组生成和输出一个合并事件信号(由一个合并导通事件信号和一个合并截止事件信号组成)。
在示例实施例中,合并像素组可以包括按照M×N(其中,M和N中的每一个是2或更大的整数)布置的像素。在一些示例实施例中,合并模式可以被定义为多种类型,并且包括在合并像素组中的像素的数量可以根据合并模式的类型而变化。稍后将参照图5A至图5C和图6B描述合并像素组的特定示例。
作为示例,读出电路120可以在正常模式中以列(或行)为单位顺序地选择像素阵列110的像素,从像素阵列110接收与所选择的像素相对应的事件信号,并且以行(或列)为单位输出该事件信号。
从读出电路120输出的合并事件信号或事件信号可以作为极性信息与地址信号一起被提供给输出缓冲器。
在合并模式中,动态视觉传感器100可以基于从读出电路120输出的合并事件信号生成合并的事件数据EVT_DATA。合并的数据可以被理解为经过合并处理的数据。另外,动态视觉传感器100可以在正常模式中基于从读出电路120输出的事件信号来生成事件数据(EVT_DATA)。
读出电路120可以以合并像素组为单位处理在合并模式中从像素阵列110输出的事件信号,以生成具有减少的数据量的合并事件信号。因此,由合并事件信号引起的事件数据(EVT_DATA)的量减少,并且事件数据处理器20可以通过快速处理少量的事件数据(EVT_DATA)来有效地执行高速帧操作。
另外,读出电路120可以在合并模式或正常模式中操作,以支持事件数据处理器20的高速帧操作和低速帧操作两者。因此,图像装置10可以根据用户的请求生成高分辨率图像,或者以低功率生成低分辨率图像,从而向用户提供高灵活性。
图2是示出根据示例实施例的操作动态视觉传感器的方法的流程图。
参照图2,当作为S100中的“是”选择了合并模式时,动态视觉传感器可以执行操作S110和操作S120,并且当作为S100中的“否”选择了正常模式时,动态视觉传感器可以执行操作S130和操作S140。
在示例实施例中,动态视觉传感器可以在事件数据处理器的控制下在合并模式或正常模式中操作。具体地,动态视觉传感器可以根据从事件数据处理器接收的模式控制信号在选择的模式中操作。
在操作S110中,动态视觉传感器可以根据从像素阵列输出的事件信号生成每个合并像素组的极性信息和与极性信息相对应的地址信号。
在操作S120中,动态视觉传感器可以基于在操作S110中生成的极性信息和地址信号来生成合并的事件数据,并且将该合并的事件数据输出到事件数据处理器。
在操作S130中,动态视觉传感器可以根据从像素阵列输出的事件信号生成每个像素的极性信息和与极性信息相对应的地址信号。
在操作S140中,动态视觉传感器可以基于在操作S130中生成的极性信息和地址信号来生成事件数据,并将该事件数据输出到事件数据处理器。
图3A和图3B是具体示出根据示例实施例的动态视觉传感器100的框图。假定图3A的动态视觉传感器100在合并模式中操作,并且图3B的动态视觉传感器100在正常模式中操作。
参照图3A,动态视觉传感器100可以包括像素阵列110、列选择器130、行地址生成器140和输出缓冲器150。
在示例实施例中,图1的读出电路120可以包括图3A中的第一读出子电路121和第二读出子电路122。第一读出子电路121可以被包括在列选择器130中,或者可以被实施为与列选择器130相邻地布置。第二读出子电路122可以包括在行地址生成器140中,或者可以与行地址生成器140相邻地布置。
在图3A和图3B中,相对于第一读出子电路121被包括在列选择器130中并且第二读出子电路122被包括在行地址生成器140中的情况描述了示例实施例。列选择器130可以被称为列地址生成器。
在示例实施例中,第一读出子电路121和第二读出子电路122被实施为数字电路,并且可以被设计为寄存器传输级(RTL)工具。在一些示例实施例中,第一读出子电路121和第二读出子电路122可以被实施为模拟电路。
像素阵列110可以包括多个像素,并且多个像素可以被分组为合并像素组。例如,合并像素组可以包括按照2×2(即,两行和两列)布置的像素。例如,第一合并像素组BPXG1可以包括第一像素至第四像素PX11、PX21、PX12和PX22。第一像素PX11和第二像素PX21可以在第一列C1中布置,并且第三像素PX12和第四像素PX22可以在第二列C2中布置。第一像素PX11和第三像素PX12可以在第一行R1中布置,并且第二像素PX21和第四像素PX22可以在第二行R2中布置。
在示例实施例中,基于合并模式控制信号BIN_MODE,第一读出子电路121可以执行路由以将由列选择器130生成的第一列选择信号C_SEL[1]施加到布置在第一列C1中的第一像素PX11和第二像素PX21以及布置在第二列C2中的第三像素PX12和第四像素PX22。在示例实施例中,第一读出子电路121可以包括复用器,复用器基于选择的模式将第一列选择信号C_SEL[1]或第二列选择信号选择性地输出到布置在第二列C2中的第三像素PX12和第四像素PX22。
在示例实施例中,第一像素PX11可以响应于第一列选择信号C_SEL[1]而输出第一事件信号。第一事件信号可以包括第一导通事件信号ON_EVT_S[11]和第一截止事件信号OFF_EVT_S[11]。第二像素PX21可以响应于第一列选择信号C_SEL[1]而输出第二事件信号。第二事件信号可以包括第二导通事件信号ON_EVT_S[21]和第二截止事件信号OFF_EVT_S[21]。第三像素PX12可以响应于第一列选择信号C_SEL[1]而输出第三事件信号。第三事件信号可以包括第三导通事件信号ON_EVT_S[12]和第三截止事件信号OFF_EVT_S[12]。第四像素PX22可以响应于第一列选择信号C_SEL[1]而输出第***信号。第***信号可以包括第四导通事件信号ON_EVT_S[22]和第四截止事件信号OFF_EVT_S[22]。也就是说,由第一列选择信号C_SEL[1]同时选择的第一像素至第四像素PX11、PX21、PX12和PX22可以分别将第一事件信号至第***信号输出到第二读出子电路122。
在示例实施例中,基于合并模式控制信号BIN_MODE,第二读出子电路122可以被配置为从第一导通事件信号至第四导通事件信号ON_EVT_S[11]、ON_EVT_S[21]、ON_EVT_S[12]、ON_EVT_S[22]生成第一合并导通事件信号BIN_ON_EVT_S[1],并且从第一截止事件信号至第四截止事件信号OFF_EVT_S[11]、OFF_EVT_S[21]、OFF_EVT_S[12]和OFF_EVT_S[22]生成第一合并截止事件信号BIN_OFF_EVT_S[1]。
在示例实施例中,第二读出子电路122可以通过对第一导通事件信号至第四导通事件信号ON_EVT_S[11]、ON_EVT_S[21]、ON_EVT_S[12]和ON_EVT_S[22]的或操作或求和操作来生成第一合并导通事件信号BIN_ON_EVT_S[1]。另外,第二读出子电路122可以通过对第一截止事件信号至第四截止事件信号OFF_EVT_S[11]、OFF_EVT_S[21]、OFF_EVT_S[12]和OFF_EVT_S[22]的或操作或求和操作来生成第一合并截止事件信号BIN_OFF_EVT_S[1]。在示例实施例中,第二读出子电路122可以包括多个复用器、多个或门和多个与门。
在示例实施例中,行地址生成器140可以包括信号生成电路141。信号生成电路141可以基于从第二读出子电路122接收的第一合并导通事件信号BIN_ON_EVT_S[1]和第一合并截止事件信号BIN_OFF_EVT_S[1]来生成与第一合并像素组BPXG1相对应的第一极性信息PI[1]和与第一极性信息相对应的第一行地址信号R_ADDR[1]。在示例实施例中,第一行地址信号R_ADDR[1]可以与第一像素至第四像素PX11、PX21、PX12和PX22中的任何一个的行地址相对应。例如,第一行地址信号R_ADDR[1]可以与第一行R1相对应。
在示例实施例中,列选择器130可以生成与第一合并像素组BPXG1相对应的第一列地址信号C_ADDR[1]。在示例实施例中,第一列地址信号C_ADDR[1]可以与第一像素至第四像素PX11、PX21、PX12和PX22中的任何一个的列地址相对应。例如,第一列地址信号C_ADDR[1]可以与第一列C1相对应。
在示例实施例中,输出缓冲器150可以基于第一列地址信号C_ADDR[1]、第一行地址信号R_ADDR[1]和第一极性信息PI[1]来生成事件数据EVT_DATA。
参照图3B,基于正常模式控制信号N_MODE,第一读出子电路121可以执行路由以将由列选择器130生成的第一列选择信号C_SEL[1]仅施加到布置在第一列C1中的第一像素PX11和第二像素PX21。在这方面,第一列选择信号C_SEL[1]可以不被施加到第三像素PX12和第四像素PX22。
在示例实施例中,第一像素PX11可以响应于第一列选择信号C_SEL[1]而输出第一事件信号。第一事件信号可以包括第一导通事件信号ON_EVT_S[11]和第一截止事件信号OFF_EVT_S[11]。第二像素PX21可以响应于第一列选择信号C_SEL[1]而输出第二事件信号。第二事件信号可以包括第二导通事件信号ON_EVT_S[21]和第二截止事件信号OFF_EVT_S[21]。
在示例实施例中,第二读出子电路122可以基于正常模式控制信号N_MODE将第一导通事件信号ON_EVT_S[11]、第一截止事件信号OFF_EVT_S[11]、第二导通事件信号ON_EVT_S[21]和第二截止事件信号OFF_EVT_S[21]发送到信号生成电路141。
在示例实施例中,列选择器130可以生成与第一列选择信号C_SEL[1]相对应的第一列地址信号C_ADDR[1]。
在示例实施例中,信号生成电路141可以生成与第一像素PX11相对应的第一极性信息PI[11]和与第一极性信息PI[11]相对应的第一行地址信号R_ADDR[11]。信号生成电路141可以生成与第二像素PX21相对应的第二极性信息PI[21]和与第二极性信息PI[21]相对应的第二行地址信号R_ADDR[21]。
在示例实施例中,输出缓冲器150可以基于第一列地址信号C_ADDR[1]、第一极性信息PI[11]、第二极性信息PI[21]、第一行地址信号R_ADDR[11]和第二行地址信号R_ADDR[21]来生成事件数据EVT_DATA。
如图3A和图3B所示,当动态视觉传感器100在合并模式中操作时生成的数据量可以小于当在正常模式中操作时生成的数据量。在合并模式中的动态视觉传感器100可以适合于低功率操作或用于生成低分辨率图像的图像装置的操作。另外,由于数据量小,所以处于合并模式的动态视觉传感器100可以适合于高速帧操作。
图4是具体示出根据示例实施例的动态视觉传感器100'的框图。图4的动态视觉传感器100'可以是由行选择器130'选择像素并且由列地址生成器140'生成极性信息的示例实施例。容易理解的是,本公开的技术思想可以充分地应用于如图4所示的实施方式。
参照图4,动态视觉传感器100'可以包括像素阵列110'、行选择器130'、列地址生成器140'和输出缓冲器150'。在示例实施例中,第一读出子电路121'可以被包括在行选择器130'中,并且第二读出子电路122'可以被包括在列地址生成器140'中。
在示例实施例中,第一读出子电路121'可以基于模式控制信号CS_MODE将行选择信号R_SEL路由到布置在至少一行中的像素。另外,第一读出子电路121'可以生成与行选择信号R_SEL相对应的行地址信号R_ADDR,并将生成的结果输出到输出缓冲器150'。
在示例实施例中,像素阵列110'可以输出与多个像素中的由行选择信号R_SEL选择的像素相对应的事件信号EVT_S。
在示例实施例中,第二读出子电路122'可以基于模式控制信号CS_MODE从事件信号EVT_S生成合并事件信号,或者可以将事件信号EVT_S发送到信号生成电路141'。
在示例实施例中,信号生成电路141'可以基于从第二读出子电路122'接收的合并事件信号或事件信号EVT_S生成极性信息PI和与极性信息PI相对应的列地址信号C_ADDR,并将生成的结果输出到输出缓冲器150'。
在示例实施例中,输出缓冲器150'可以基于行地址信号R_ADDR、列地址信号C_ADDR和极性信息PI生成事件数据EVT_DATA。
在下文中,着重于图3A中的动态视觉传感器100的结构来描述示例实施例,但是应充分理解的是,本公开的技术思想也能够应用于图4的动态视觉传感器100'的结构。
图5A至图5C是分别示出根据示例实施例的合并像素组BPXG、BPXG'和BPXG”的示图。
参照图5A,合并像素组BPXG可以包括按照3×3(即,三行和三列)布置的第一像素至第九像素P11、PX21、PX31、PX12、PX22、PX32、PX13、PX23和PX33。也就是说,合并像素组BPXG包括九个像素,并且在合并模式中每九个像素可以生成一个合并事件信号(包括合并导通事件信号和合并截止事件信号)。
参照图5B,合并像素组BPXG'可以包括按照2×3(即,两行和三列)布置的第一像素至第六像素P11、PX21、PX12、PX22、PX13和PX23。也就是说,合并像素组BPXG'包括六个像素,并且在合并模式中每六个像素可以生成一个合并事件信号。
进一步参照图5C,合并像素组BPXG”可以包括按照4×4(即,四行和四列)布置的第一像素至第十六像素PX11、PX21、PX31、PX41、PX12、PX22、PX32、PX42、PX13、PX23、PX33、PX43、PX14、PX24、PX34和PX44。也就是说,合并像素组BPXG”包括16个像素,并且在合并模式中每16个像素可以生成一个合并事件信号。
然而,图5A至图5C所示的合并像素组BPXG、BPXG'和BPXG”仅为示例,而示例实施例不限于此,并且可以定义更多不同类型的合并像素组。读出电路可以被实施为同时选择与定义的合并像素组相对应的像素并且从与选择的像素相对应的事件信号生成合并事件信号。
图6A是示出根据示例实施例的操作动态视觉传感器的方法的流程图,并且图6B是示出根据图6A的合并模式的多种类型的合并组的合并像素组BPXGa、BPXGb和BPXGc的示图。
参照图6A,当作为S200中的“是”选择了合并模式时,动态视觉传感器可以执行操作S210至操作S230,并且当作为S200中的“否”选择了正常模式时,动态视觉传感器可以执行操作S240和操作S250。
在操作S210中,动态视觉传感器可以从多种类型的合并模式中识别(例如,选择)一种类型的合并模式。在示例实施例中,动态视觉传感器可以从多种类型的合并模式中选择由事件数据处理器指示的一种类型的合并模式。例如,合并模式可以包括第一类型至第三类型的合并模式。
进一步参照图6B,与第一类型相对应的合并像素组BPXGa可以包括按照2×2布置的四个像素,与第二类型相对应的合并像素组BPXGb可以包括按照3×3布置的九个像素,并且与第三类型相对应的合并像素组BPXGc可以包括按照4×4布置的16个像素。
例如,在第一类型的合并模式中,第一像素PX11、第二像素PX21、第五像素PX12和第六像素PX22;第三像素PX31、第四像素PX41、第七像素PX32和第八像素PX42;第九像素PX13、第十像素PX23、第十三像素PX14和第十四像素PX24;以及第十一像素PX33、第十二像素PX43、第十五像素PX34和第十六像素PX44可以分别被分组为不同的合并像素组。
例如,在第二类型的合并模式中,第一像PX11、第二像素PX21、第三像素PX31、第五像素PX12、第六像素PX22、第七像素PX32、第九像素PX13、第十像素PX23和第十一像素PX33;第四像素PX41、第八像素PX42和第十二像素PX43;第十三像素PX43、第十四像素PX24和第十五像素PX34;第十六像素PX44可以分别被分组为不同的合并像素组BPXGb。
例如,在第三类型的合并模式中,第一像素至第十六像素PX11、PX21、PX31、PX41、PX12、PX22、PX32、PX42、PX13、PX23、PX33、PX43、PX14、PX24、PX34和PX44可以被分组到一个合并像素组BPXGc中。
然而,图6B仅示出示例,而示例实施例不限于此,并且存在更少或更多的类型,并且可以根据各种类型不同地定义合并像素组。
返回参照图6A,在操作S220中,动态视觉传感器可以根据选择的类型生成每个合并像素组的极性信息和与极性信息相对应的地址信号。在示例实施例中,动态视觉传感器可以针对以与选择的类型相对应的合并像素组为单位进行分组的像素执行根据示例实施例的操作。在示例实施例中,动态视觉传感器的读出电路可以被实施为支持多种类型。
在操作S230中,动态视觉传感器可以基于在操作S220中生成的极性信息和地址信号生成合并的事件数据,并且将该合并的事件数据输出到事件数据处理器。
在操作S240中,动态视觉传感器可以从自像素阵列输出的事件信号生成每个像素的极性信息和与极性信息相对应的地址信号。
在操作S250中,动态视觉传感器可以基于在操作S240中生成的极性信息和地址信号生成事件数据,并且将该事件数据输出到事件数据处理器。
动态视觉传感器可以支持多种类型的合并模式,多种类型的合并模式中的每一种包括不同的合并像素组,使得图像装置可以不同地调整功耗量、数据速率等。
图7A是示出根据示例实施例的动态视觉传感器的像素PX的结构的示图,并且图7B是具体示出图7A的事件检测电路220的示图。
参照图7A,像素PX可以包括光接收电路210和事件检测电路220。
在示例实施例中,光接收电路210可以包括光电二极管PD、对数放大器LA和反馈晶体管FB。光电二极管PD可以被称为光电转换元件。在一些示例实施例中,光接收电路210还可以包括更多的光电二极管。对数放大器LA可以放大与由光电二极管PD生成的光电流相对应的电压。对数放大器LA可以输出对数级别的对数电压VLOG。反馈晶体管FB可以将光接收电路210与图7B的差分电路221隔离。
在示例实施例中,事件检测电路220可以对对数电压VLOG执行各种处理。例如,事件检测电路220可以放大对数电压,将放大的对数电压与参考电压进行比较,确定入射到光电二极管PD上的光的强度是增加还是降低,并且输出与确定的值相对应的事件信号(即,导通事件信号ON_EVT和截止事件信号OFF_EVT)。事件检测电路220可以在输出事件信号之后被复位信号RST复位。
进一步参照图7B,事件检测电路220可以包括差分电路221、比较电路222和事件信号生成电路223。
在示例实施例中,差分电路221可以放大对数电压VLOG,并且生成指示放大的对数电压VLOG的变化方向的电压VDIFF。例如,差分电路221可以包括由电容器CAP1和CAP2操作的开关元件SW、差分放大器DA和复位信号RST。具体地,电容器CAP1和CAP2可以存储由光电二极管PD生成的电能。例如,考虑到可能在一个像素PX中连续发生的两个事件之间的最短时间,可以适当地选择电容器CAP1和CAP2的电容容量。当开关元件SW被复位信号RST接通时,像素PX可以被初始化。在一些示例实施例中,复位信号RST可以由图3A的行地址生成器140或图4的列地址生成器140'生成。
在示例实施例中,比较电路222包括比较器CP1和CP2,并且比较电路222可以通过比较器CP1和CP2将差分放大器DA的电压VDIFF与参考电压Vref的电平进行比较,并且将比较结果输出到事件信号生成电路223。
在示例实施例中,事件信号生成电路223可以基于从比较电路222接收的比较结果来确定在像素PX'中检测到的事件是导通事件还是截止事件。例如,当检测到光强度增加超过参考值的事件时,事件信号生成电路223可以输出逻辑高(H)的导通事件信号ON_EVT和逻辑低(L)的截止事件信号OFF_EVT。当检测到光强度降低超过参考值的事件时,事件信号生成电路223可以输出逻辑低(L)的导通事件信号ON_EVT和逻辑高(H)的截止事件信号OFF_EVT。
然而,图7A和图7B所示的像素PX的配置仅为示例,并且示例实施例不限于此。示例实施例可以应用于通过检测变化的光强度来检测事件并且生成检测结果作为事件信号的各种像素。
图8是根据示例实施例的动态视觉传感器300的详细框图。
参照图8,动态视觉传感器300可以包括像素阵列310、列选择器330和行地址生成器340。
在示例实施例中,像素阵列310可以包括其中包括多列和多行的像素PX11、PX21、PX12、PX22、PX13、PX23、PX14、PX24、…、PX1n和PX2n。例如,布置在第一行中的像素PX11、P12、PX13、PX14、…、和PX1n可以连接到第一导通行线ON_RL1和第一截止行线OFF_RL1,并且布置在第二行中的像素PX21、PX22、PX23、PX24、…、和PX2n可以连接到第二导通行线ON_RL2和第二截止行线OFF_RL2。另外,例如,布置在第一列中的像素PX11、PX21、…、和PXn1可以连接到第一列线CL1;布置在第二列中的像素PX12、PX22、…、和PXn2可以连接到第二列线CL2;布置在第三列中的像素PX13、PX23、…、和PXn3可以连接到第三列线CL3;布置在第四列中的像素PX14、PX24、…、和PXn4可以连接到第四列线CL4;并且布置在第n列中的像素PX1n、PX2n、…、和PXnn连接到第n列线CLn。
在示例实施例中,列选择器330包括第一读出子电路321,并且第一读出子电路321可以包括第一行第一列(11)复用器至第k行第一列(k1)复用器MUX11、MUX21、…、和MUXk1。例如,列选择器330可以顺序地生成第一列选择信号C_SEL[1]至第n列选择信号C_SEL[n]。例如,第一行第一列(11)复用器MUX11可以基于选择的模式选择第一列选择信号C_SEL[1]和第二列选择信号C_SEL[2]中的一个,并且将选择的结果输出到第二列线CL2。例如,第二行第一列(21)复用器MUX21可以基于选择的模式选择第三列选择信号C_SEL[3]和第四列选择信号C_SEL[4]中的一个,并且将选择的结果输出到第四列线CL4。例如,第k行第一列(k1)复用器MUXk1可以基于选择的模式选择第(n-1)列选择信号C_SEL[n-1]和第n列选择信号C_SEL[n]中的一个,并且将选择的结果输出到第n列线CLn。
在示例实施例中,行地址生成器340包括第二读出子电路322和信号生成电路341,并且第二读出子电路322可以包括多个复用器MUX12、MUX22、…、和MUXn2、多个或门OR1、OR2、…、和ORn、多个与门AND1、AND2、…、和ANDn以及多个反相器IVT。例如,第一或门OR1的输入可以连接到第一导通行线ON_RL1和第二导通行线ON_RL2,并且第二或门OR2的输入可以连接到第一截止行线OFF_RL1和第二截止行线OFF_RL2。例如,第一行第二列(12)复用器MUX12可以基于选择的模式选择第一导通行线ON_RL1的信号或第一或门OR1的输出,并且将选择的结果输出到信号生成电路341。例如,第二行第二列(22)复用器MUX22可以基于选择的模式选择第一截止行线OFF_RL1的信号或第二或门OR2的输出,并且将选择的结果输出到信号生成电路341。例如,第一与门AND1的输入可以连接到第二导通行线ON_RL2,以选择性地将第二导通行线ON_RL2的信号输出到信号生成电路341。例如,第二与门AND2的输入可以连接到第二截止行线OFF_RL2,以选择性地将第二截止行线OFF_RL2的信号输出到信号生成电路341。例如,第一与门AND1和第二与门AND2可以基于选择的模式而被激活或去激活。具体地,第一与门AND1和第二与门AND2可以根据反相器IVT的输出值而被激活或去激活。
图8的动态视觉传感器300仅为实例,并且示例实施例不限于此。视觉传感器可以以各种方式实施以执行根据本公开的操作。
图9A是用于解释图8的动态视觉传感器300在合并模式的第一部分中的操作的示图,并且图9B是用于解释图8的动态视觉传感器300在合并模式的第二部分中的操作的示图。在下文中,假定第二部分紧随第一部分。通过在图9A和图9B中描述的方法,通过减少针对像素阵列310的采样次数,动态视觉传感器300的功耗减少并且处理的数据量减少,因此图像装置可以以高速帧速率操作。
参照图9A,列选择器330可以生成第一列选择信号C_SEL[1]。第一列选择信号C_SEL[1]可以被施加到第一列线CL1。第一行第一列(11)复用器MUX11可以基于合并模式控制信号BIN_MODE路由要被施加到第二列线CL2的第一列选择信号C_SEL[1]。
选择的像素PX11、PX21、PX12和PX22可以被分组为第一合并像素组。选择的像素PX11、PX21、PX12和PX22中的一些像素PX11和PX12可以通过第一导通行线ON_RL1和第一截止行线OFF_RL1输出导通事件信号和截止事件信号。选择的像素PX11、PX21、PX12和PX22中的其余的像素PX21和PX22可以通过第二导通行线ON_RL2和第二截止行线OFF_RL2输出导通事件信号和截止事件信号。
第一或门OR1可以对第一导通行线ON_RL1的信号和第二导通行线ON_RL2的信号进行或计算,并且输出或计算结果。第一行第二列(12)复用器MUX12可以基于合并模式控制信号BIN_MODE选择第一或门OR1的输出,并且将选择的输出输出到信号生成电路341作为与第一合并像素组相对应的第一合并导通事件信号BIN_ON_EVT_S[1]。
第二或门OR2可以对第一截止行线OFF_RL1的信号和第二截止行线OFF_RL2的信号进行或计算,并且输出或计算结果。第二行第二列(22)复用器MUX22可以基于合并模式控制信号BIN_MODE选择第二或门OR2的输出,并且将选择的输出输出到信号生成电路341作为与第一合并像素组相对应的第一合并截止事件信号BIN_OFF_EVT_S[1]。
例如,合并模式控制信号BIN_MODE可以是逻辑高信号,并且第一与门AND1和第二与门AND2可以通过由反相器IVT反相的合并模式控制信号BIN_MODE被去激活。
进一步参照图9B,列选择器330可以生成第三列选择信号C_SEL[3]。第三列选择信号C_SEL[3]可以被施加到第三列线CL3。第二行第一列(21)复用器MUX21可以基于合并模式控制信号BIN_MODE路由要被施加到第四列线CL4的第三列选择信号C_SEL[3]。
选择的像素PX13、PX23、PX14和PX24可以被分组为第二合并像素组。选择的像素PX13、PX23、PX14和PX24中的一些像素PX13和PX14可以通过第一导通行线ON_RL1和第一截止行线OFF_RL1输出导通事件信号和截止事件信号。选择的像素PX13、PX23、PX14和PX24中的其余像素PX23和PX24可以通过第二导通行线ON_RL2和第二截止行线OFF_RL2输出导通事件信号和截止事件信号。
第一或门OR1可以对第一导通行线ON_RL1的信号和第二导通行线ON_RL2的信号进行或计算,并且输出或计算结果。第一行第二列(12)复用器MUX12可以基于合并模式控制信号BIN_MODE选择第一或门OR1的输出,并且将选择的输出输出到信号生成电路341作为与第二合并像素组相对应的第二合并导通事件信号BIN_ON_EVT_S[2]。
第二或门OR2可以对第一截止行线OFF_RL1的信号和第二截止行线OFF_RL2的信号进行或计算,并且输出或计算结果。第二行第二列(22)复用器MUX22可以基于合并模式控制信号BIN_MODE选择第二或门OR2的输出,并且将选择的输出输出到信号生成电路341作为与第二合并像素组相对应的第二合并截止事件信号BIN_OFF_EVT_S[2]。
例如,合并模式控制信号BIN_MODE可以是逻辑高信号,并且第一与门AND1和第二与门AND2可以通过由反相器IVT反相的合并模式控制信号BIN_MODE被去激活。
图10A是用于解释图8的动态视觉传感器300在正常模式的第一部分中的操作的示图,并且图10B是用于解释图8的动态视觉传感器300在正常模式的第二部分中的操作的示图。在下文中,假定第二部分紧随第一部分。通过在图10A和图10B中描述的方法,图像装置可以以低速帧速率操作。
参照图10A,列选择器330可以生成第一列选择信号C_SEL[1]。第一列选择信号C_SEL[1]可以被施加到第一列线CL1。第一行第一列(11)复用器MUX11可以基于正常模式控制信号N_MODE而不将第一列选择信号C_SEL[1]输出到第二列线CL2。
选择的像素PX11和PX21中的一个像素PX11可以通过第一导通行线ON_RL1和第一截止行线OFF_RL1输出导通事件信号和截止事件信号。选择的像素PX11和PX21中的其余一个像素PX21可以通过第二导通行线ON_RL2和第截止行线OFF_RL2输出导通事件信号和截止事件信号。
第一行第二列(12)复用器MUX12可以基于正常模式控制信号N_MODE选择第一导通行线ON_RL1的信号,并且将选择的信号输出到信号生成电路341作为第一导通事件信号ON_EVT_S[11]。第二行第二列(22)复用器MUX22可以基于正常模式控制信号N_MODE选择第一截止行线OFF_RL1的信号,并且将选择的信号输出到信号生成电路341作为第一截止事件信号OFF_EVT_S[11]。
例如,正常模式控制信号N_MODE可以是逻辑低信号,并且第一与门AND1和第二与门AND2可以通过由反相器IVT反相的正常模式控制信号N_MODE被激活。第一与门AND1可以将第二导通行线ON_RL2的信号输出到信号生成电路341作为第二导通事件信号ON_EVT_S[21]。第二与门AND2可以将第二截止行线OFF_RL2的信号输出到信号生成电路341作为第二截止事件信号OFF_EVT_S[21]。
进一步参照图10B,列选择器330可以生成第二列选择信号C_SEL[2]。第一行第一列(11)复用器MUX11可以基于正常模式控制信号N_MODE路由要被施加到第二列线CL2的第二列选择信号C_SEL[2]。
选择的像素PX12和PX22中的一个像素PX12可以通过第一导通行线ON_RL1和第一截止行线OFF_RL1输出导通事件信号和截止事件信号。选择的像素PX12和PX22中的其余一个像素PX22可以通过第二导通行线ON_RL2和第二截止行线OFF_RL2输出导通事件信号和截止事件信号。
第一行第二列(12)复用器MUX12可以基于正常模式控制信号N_MODE选择第一导通行线ON_RL1的信号,并且将选择的信号输出到信号生成电路341作为第三导通事件信号ON_EVT_S[12]。第二行第二列(22)复用器MUX22可以基于正常模式控制信号N_MODE选择第一截止行线OFF_RL1的信号,并且将选择的信号输出到信号生成电路341作为第三截止事件信号OFF_EVT_S[12]。
例如,正常模式控制信号N_MODE可以是逻辑低信号,并且第一与门AND1和第二与门AND2可以通过由反相器IVT反相的正常模式控制信号N_MODE被激活。第一与门AND1可以将第二导通行线ON_RL2的信号输出到信号生成电路341作为第四导通事件信号ON_EVT_S[22]。第二与门AND2可以将第二截止行线OFF_RL2的信号输出到信号生成电路341作为第四截止事件信号OFF_EVT_S[22]。
图11是根据示例实施例的动态视觉传感器400的详细框图。在下文中,将主要描述与图8的动态视觉传感器300的结构差异。
参照图11,动态视觉传感器400可以包括像素阵列410、列选择器430和行地址生成器440。
在示例实施例中,像素阵列410可以包括像素PX11'、PX21'、PX12'、PX22'、PX13'、PX23'、PX14'、PX24'、…、PX1n'和PX2n'以及布置成多列和多行的多个事件检测电路411_1、411_2、…、和411_n。
与图8的像素PX11、PX21、PX12、PX22、PX13、PX23、PX14、PX24、…、PX1n和PX2n不同,图11的像素PX11'、PX21'、PX12'、PX22'、PX13'、PX23'、PX14'、PX24'、…、PX1n'和PX2n'不包括事件检测电路。相反,像素阵列410包括与像素分离并且布置在像素阵列410上的多个事件检测电路411_1、411_2、…、411_n。
例如,布置在第一行中的像素PX11'、P12'、PX13'、PX14'、…、和PX1n'可以连接到第一行线RL1,并且布置在第二行中的像素PX21'、PX22'、PX23'、PX24'、…、和PX2n'可以连接到第二行线RL2。
上述示例实施例可以应用于图11的动态视觉传感器400,并且将省略对其的详细描述。
图12是示出根据示例实施例的在合并模式中操作动态视觉传感器的方法的流程图。
参照图12,在操作S300中,动态视觉传感器可以顺序生成多个列选择信号中的一些列选择信号。
在操作S310中,动态视觉传感器可以通过响应于顺序生成的列选择信号而选择的像素来生成事件信号。
在操作S320中,动态视觉传感器可以以合并像素组为单位生成极性信息和地址信号。
在操作S330中,动态视觉传感器可以基于在操作S320中生成的极性信息和地址信号输出合并的事件数据。
图13是示出根据示例实施例的电子装置1000的框图。
例如,电子装置1000可以被实施为智能电话、平板计算机、台式计算机、膝上型计算机或可穿戴式装置。此外,电子装置1000可以被实施为操作无人安全***、物联网或自主车辆所需的各种类型的电子装置中的一个。
参照图13,电子装置1000可以包括图像装置1100、主处理器1200、工作存储器1300、储存器1400、显示器1500、通信块1600和用户接口1700。
以上参照图1至图12的描述可以应用于图像装置1100。具体地,图像装置1100可以包括视觉传感器1110和处理器1120,并且视觉传感器1110可以包括示例实施例的读出电路。
工作存储器1300可以存储用于电子装置1000的操作的数据。例如,工作存储器1300可以临时存储由处理器1120处理的包或帧。例如,工作存储器1300可以包括易失性存储器(诸如动态RAM(DRAM)和同步DRAM(SDRAM))和/或非易失性存储器(诸如相变RAM(PRAM)、磁阻RAM(MRAM)、电阻RAM(ReRAM)和铁电RAM(FRAM)。
储存器1400可以存储用于驱动电子装置1000的固件或软件。可以根据主处理器1200的请求或命令从储存器1400读取固件或软件,并且可以将读取的固件或软件加载到工作存储器1300中。储存器1400可以包括非易失性存储器,诸如闪速存储器、PRAM、MRAM、ReRAM或FRAM。
显示器1500可以包括显示面板和显示串行接口(DSI)***电路。例如,显示面板可以被实施为各种装置,诸如液晶显示(LCD)装置、发光二极管(LED)显示装置、有机LED(OLED)显示装置和有源矩阵OLED(AMOLED)显示装置。嵌入在主处理器1200中的DSI主机可以通过DSI与显示面板执行串行通信。DSI***电路可以包括驱动显示面板所需的定时控制器、源驱动器等。
通信块1600可以通过天线与外部装置/***交换信号。通信块1600的收发器1610和调制器/解调器(调制解调器)1620可以根据无线通信协议(诸如,长期演进(LTE)、微波接入全球互通(WiMAX)、全球移动通信***(GSM)、码分多址(CDMA)、蓝牙、近场通信(NFC)、无线保真(Wi-Fi)和射频识别(RFID))处理与外部装置/***交换的信号。
用户接口1700可以包括诸如键盘、鼠标、小键盘、按钮、触摸面板、触摸屏、触摸板、触摸球、陀螺仪传感器、振动传感器和加速度传感器的输入接口中的至少一个。
电子装置1000的组件可以基于各种接口协议(诸如通用串行总线(USB)、小型计算机***接口(SCSI)、***组件互连快速(PCIe)、移动PCLe(M-PCIe)、高级技术附件(ATA)、并行ATA(PATA)、串行ATA(SATA)、串行附接SCSI(SAS)、集成驱动电子装置(IDE)、增强IDE(EIDE)、非易失性存储器快速(NVMe)和通用闪存(UFS))中的一个或多个来交换数据。
尽管已经具体示出和描述了示例实施例的各方面,但是将理解的是,在不脱离所附权利要求的精神和范围的情况下,可以在其中进行形式上和细节上的各种改变。
Claims (20)
1.一种动态视觉传感器,包括:
像素阵列,其包括按照多行和多列布置的多个像素,其中,所述多个像素中的每一个被配置为检测入射光的强度的变化;以及
读出电路,其被配置为:在合并操作的第一部分中,同时选择所述多列中的第一目标列的第一像素,并且基于从所述第一像素同时输出的第一事件信号生成并输出第一合并像素组的第一合并事件信号。
2.根据权利要求1所述的动态视觉传感器,其中,所述读出电路还被配置为:在所述合并操作的紧随所述第一部分的第二部分中,同时选择所述多列中的第二目标列的第二像素,并且基于从所述第二像素同时输出的第二事件信号生成并输出第二合并像素组的第二合并事件信号。
3.根据权利要求2所述的动态视觉传感器,其中,所述第二目标列与所述第一目标列相邻。
4.根据权利要求1所述的动态视觉传感器,其中,所述第一合并像素组中的每一组包括按照M×N阵列布置的像素,其中,M和N中的每一个是等于或大于2的整数。
5.根据权利要求4所述的动态视觉传感器,其中,所述读出电路还被配置为根据所述合并操作的类型调整M和N中的至少一个。
6.根据权利要求1所述的动态视觉传感器,其中,所述读出电路还被配置为:在正常模式中,顺序地选择所述多列,并且以行为单位输出从所述像素阵列输出的与所述多个像素相对应的事件信号。
7.根据权利要求1所述的动态视觉传感器,其中,所述多个像素中的每一个包括:
光电转换元件,其被配置为累积与所述入射光相对应的电荷;
光接收电路,其被配置为基于与累积的电荷相对应的光电流来输出对数电压;以及
事件检测电路,其被配置为:放大所述对数电压,将放大后的对数电压与参考电压进行比较,识别所述入射光的强度的所述变化,并且输出与所述变化相对应的事件信号。
8.根据权利要求1所述的动态视觉传感器,其中,所述多个像素中的每一个包括:
光电转换元件,其被配置为累积与所述入射光相对应的电荷;以及
光接收电路,其被配置为基于与累积的电荷相对应的光电流来输出对数电压,并且
其中,所述像素阵列还包括多个事件检测电路,所述多个事件检测电路被配置为:将来自所述多个像素的对数电压与参考电压进行比较,以识别所述入射光的强度的所述变化,并且输出与所述变化相对应的事件信号。
9.根据权利要求8所述的动态视觉传感器,其中,所述多个事件检测电路分别与所述多行一一对应。
10.根据权利要求1所述的动态视觉传感器,还包括:
列选择电路,其被配置为生成同时选择所述第一部分中的所述第一像素的列选择信号;以及
行地址生成器,其被配置为生成与所述第一部分中的所述第一合并事件信号相对应的行地址信号,
其中,所述读出电路包括:
第一读出子电路,其包括第一复用器,所述第一复用器被配置为路由要被同时施加到所述第一部分中的所述第一像素中的每一个的所述列选择信号;以及
第二读出子电路,其包括多个或门和多个第二复用器,所述多个或门被配置为在所述第一部分中生成所述第一合并事件信号,所述多个第二复用器被配置为路由来自所述多个或门的所述第一合并事件信号。
11.根据权利要求10所述的动态视觉传感器,其中,所述第一读出子电路邻近所述列选择电路设置,并且所述第二读出子电路邻近所述行地址生成器设置。
12.根据权利要求1所述的动态视觉传感器,其中,所述读出电路包括数字逻辑电路。
13.一种动态视觉传感器,包括:
第一动态视觉传感器像素,其连接到第一列线、第一导通行线和第一截止行线;
第二动态视觉传感器像素,其连接到所述第一列线、第二导通行线和第二截止行线;
第三动态视觉传感器像素,其连接到第二列线、所述第一导通行线和所述第一截止行线;
第四动态视觉传感器像素,其连接到所述第二列线、所述第二导通行线和所述第二截止行线;
第一读出子电路,其包括第一复用器,所述第一复用器被配置为:基于所述动态视觉传感器的模式从施加到所述第一列线的第一列选择信号和第二列选择信号中选择选择的信号,并将所述选择的信号输出到所述第二列线;以及
第二读出子电路,其包括:
第一或门,其通过输入连接到所述第一导通行线和所述第二导通行线;
第二复用器,其被配置为基于所述模式选择并输出所述第一或门的输出和所述第一导通行线的信号中的一个;
第二或门,其通过输入连接到所述第一截止行线和所述第二截止行线;
第三复用器,其被配置为基于所述模式选择并输出所述第二或门的输出和所述第一截止行线的信号中的一个;
第一与门,其被配置为基于所述模式选择性地输出所述第二导通行线的信号;以及
第二与门,其被配置为基于所述模式选择性地输出所述第二截止行线的信号。
14.根据权利要求13所述的动态视觉传感器,其中,基于所述模式是合并模式:
所述第一复用器还被配置为选择所述第一列选择信号,并将所述第一列选择信号输出到所述第二列线,
所述第二复用器还被配置为选择所述第一或门的输出,
所述第三复用器还被配置为选择所述第二或门的输出,并且
所述第一与门和所述第二与门还被配置为被禁用。
15.根据权利要求14所述的动态视觉传感器,还包括行地址生成器,所述行地址生成器被配置为:输出所述第一或门的输出和所述第二或门的输出中的至少一个作为合并事件信号,并且输出与所述合并事件信号相对应的行地址信号。
16.根据权利要求15所述的动态视觉传感器,其中,所述第一动态视觉传感器像素至所述第四动态视觉传感器像素被包括在一个合并像素组中,并且所述行地址信号与所述第一动态视觉传感器像素至所述第四像素中的任何一个的行地址相对应。
17.根据权利要求13所述的动态视觉传感器,其中,基于所述模式是正常模式:
所述第一复用器还被配置为:在所述第一列选择信号被施加到所述第一列线时选择所述第二列选择信号,并将所述第二列选择信号输出到所述第二列线,
所述第二复用器还被配置为选择所述第一导通行线的信号,
所述第三复用器还被配置为选择所述第一截止行线的信号,
所述第一与门还被配置为被启用,并输出所述第二导通行线的信号,并且
所述第二与门还被配置为被启用,并输出所述第二截止行线的信号。
18.一种动态视觉传感器,包括:
像素阵列,其包括按照多行和多列布置的多个像素,其中,所述多个像素中的每一个被配置为检测入射光的强度的变化;以及
读出电路,其被配置为:在合并操作中,以列为单位顺序地选择所述多个像素的合并像素组,并且基于从所述合并像素组输出的多个事件信号来生成并输出所述合并像素组的合并事件信号。
19.根据权利要求18所述的动态视觉传感器,其中,所述读出电路还被配置为:在正常模式中,以列为单位顺序地选择所述多个像素,并且以行为单位输出从选择的像素输出的事件信号。
20.根据权利要求18所述的动态视觉传感器,还包括:
列选择电路,其被配置为生成与所述合并事件信号相对应的列地址;
行地址生成电路,其被配置为生成与所述合并事件信号相对应的行地址;以及
输出缓冲器,其被配置为基于所述合并事件信号、所述列地址和所述行地址来生成事件数据。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2022-0179808 | 2022-12-20 | ||
KR1020220179808A KR20240097590A (ko) | 2022-12-20 | 2022-12-20 | 비닝 모드를 지원하는 리드아웃 회로 및 이를 포함하는 다이나믹 비전 센서 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118233770A true CN118233770A (zh) | 2024-06-21 |
Family
ID=91472557
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311679409.6A Pending CN118233770A (zh) | 2022-12-20 | 2023-12-08 | 动态视觉传感器 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240205561A1 (zh) |
KR (1) | KR20240097590A (zh) |
CN (1) | CN118233770A (zh) |
-
2022
- 2022-12-20 KR KR1020220179808A patent/KR20240097590A/ko unknown
-
2023
- 2023-12-08 CN CN202311679409.6A patent/CN118233770A/zh active Pending
- 2023-12-18 US US18/543,583 patent/US20240205561A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20240205561A1 (en) | 2024-06-20 |
KR20240097590A (ko) | 2024-06-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230156368A1 (en) | Image processing device configured to regenerate timestamp and electronic device including the same | |
US11582410B2 (en) | Dynamic vision sensor and image processing device including the same | |
US10001877B2 (en) | Semiconductor device | |
US20220172375A1 (en) | Vision sensor, image processing device including the same, and operating method of the vision sensor | |
CN110650303A (zh) | 图像传感器、像素阵列和图像传感器的操作方法 | |
KR102424382B1 (ko) | 타임스탬프를 재생성하도록 구성된 이미지 처리 장치 및 그것을 포함하는 전자 기기 | |
US20230283870A1 (en) | Vision sensor and operating method thereof | |
JP2006244407A (ja) | 表示装置 | |
US11950003B2 (en) | Vision sensor and operating method of the same | |
CN118233770A (zh) | 动态视觉传感器 | |
KR102081186B1 (ko) | 엑스선 검출 장치 및 엑스선 검출 패널의 구동 방법 | |
US11765486B2 (en) | Vision sensor and image processing device including the same | |
US11418735B2 (en) | Image processing device including vision sensor and operating method thereof | |
CN112449134B (zh) | 图像传感器、地址解码器以及图像处理*** | |
CN114637423A (zh) | 显示面板及其驱动方法、显示装置 | |
US20220373389A1 (en) | Vision sensor and operating method thereof | |
US20180158204A1 (en) | Image processing device configured to generate depth map and method of operation the same | |
US20240236517A1 (en) | Vision sensor and image processing device including the same | |
KR102422392B1 (ko) | 깊이 맵을 생성하도록 구성된 이미지 처리 장치 및 그 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |