CN101690160B - 用于使用自动聚焦统计的运动检测的方法、***及设备 - Google Patents
用于使用自动聚焦统计的运动检测的方法、***及设备 Download PDFInfo
- Publication number
- CN101690160B CN101690160B CN200880017362.4A CN200880017362A CN101690160B CN 101690160 B CN101690160 B CN 101690160B CN 200880017362 A CN200880017362 A CN 200880017362A CN 101690160 B CN101690160 B CN 101690160B
- Authority
- CN
- China
- Prior art keywords
- motion
- picture frame
- window
- relative difference
- threshold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 28
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000008859 change Effects 0.000 claims description 17
- 238000003384 imaging method Methods 0.000 claims description 11
- 230000006870 function Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 230000000881 depressing effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Automatic Focus Adjustment (AREA)
Abstract
本发明揭示用于使用例如锐度得分或亮度值等成像器内已存在的统计数据的运动检测的方法、***及设备。所述方法包含:获得包含对应窗口的相应图像帧的至少两个统计数据集合;初始化运动计数器;针对每一窗口,确定特定窗口的相对差值;将所述相对差值与第一阈值进行比较。如果所述相对差值大于所述第一阈值,那么所述方法递增所述运动计数器;并通过将所述运动计数器的值与第二阈值进行比较确定是否存在运动。所述运动检测可进一步考虑所述图像帧的某些区域的相对重要性。
Description
技术领域
所揭示实施例一般来说涉及图像捕获装置,且更明确地说涉及图像捕获装置的运动检测技术。
背景技术
存在依赖于运动检测的与图像处理有关的数种算法。举例来说,在2006年8月25日提出申请的题为METHOD,APPARATUS AND SYSTEM PROVIDINGADJUSTMENT OF PLXEL DEFECT MAP(提供像素缺陷映射调整的方法、设备及***)的序列号为11/509,712的共同待决申请案中描述的方法在确定像素阵列中的缺陷位置时使用运动检测将真实缺陷与景物的小元素分离。作为另一实例,被动连续自动聚焦算法使用运动检测来控制其重新聚焦程序。
用于运动检测的简单算法将当前帧的图像与参考帧图像进行比较并对在所述帧之间是不同的像素的数目进行计数。然而,此类型的运动检测算法需要大的帧存储器缓冲器且因此,不能在具有电路面积限制的单芯片***(SOC)成像器***中容易地实施。此外,大的帧存储器增加成像装置的成本。
因此,需要用于成像器内的运动检测的经改进方法及***。进一步需要可在SOC***中实施的运动检测***及方法。
发明内容
本发明的实施例涉及成像器中的运动检测。通过以下步骤检测运动:获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口(针对每一窗口)相对差值;并基于所确定的相对差值确定是否存在运动。本发明的实施例还包含成像***,所述成像***包含通过运动检测方法检测运动的图像处理电路。本发明的实施例进一步包含成像装置,所述成像装置包含像素阵列及耦合到所述像素阵列的图像处理单元,其中所述成像处理单元可操作以使用不同图像帧中锐度得分及亮度值中的至少一者中的改变检测运动。
附图说明
图1图解说明根据所揭示实施例可在其之间检测到运动的图像帧。
图2是图解说明根据所揭示实施例用于使用统计数据进行运动检测的方法的各步骤的流程图。
图3是实施所揭示实施例的单芯片***(SOC)成像器构造的框图。
图4描绘可采用根据所揭示实施例构造的成像器的相机***,例如数码相机或数码摄像机。
具体实施方式
在以下详细说明中,参照形成本文一部分的附图,且附图中以图解说明方式显示特定实施例。这些实施例经充分详细地描述以使所属领域的技术人员能够制作及使用所述实施例,且应理解可进行结构、逻辑或程序改变。明确地说,在以下说明中,以流程图方式描述各过程。在一些实例中,除后一程序步骤需要前一程序步骤的存在的情况外,跟随其它步骤的步骤可以是颠倒的、呈不同序列的或并行的。可通过图像处理管线或处理像素值阵列的其它电路实施所揭示的过程。可使用硬件电路、经编程的处理器或所述两者的组合实施图像处理。
所揭示实施例提供一种用于基于出于其它目的已存在于成像器内的统计数据来检测运动的运动检测方法、***及设备。所揭示实施例基于经成像景物的两个帧之间的统计数据的相对值确定所述景物中是否存在运动。此允许以最小费用容易地实施所揭示实施例。
可在大多数成像器中容易得到的一种类型的统计数据是锐度得分。锐度得分是表示一区内邻近区域之间的对比度的数字。在数码相机中,通过测量像素阵列的邻近区域的强度之间的差确定锐度得分。像素阵列被划分成多个区,且在分析每一区内的邻近区域之后计算每一区的锐度得分。在红色/绿色/蓝色(RGB)像素阵列中,可通过将RGB值转换成色调/饱和度/值(HSV)***(其中值V变量用于表示强度)计算每一像素的强度。以此方式,可计算每一像素的强度值,并可计算多个像素的强度差。这些强度差表示锐度得分。包含数码相机的大多数相机具有自动聚焦特征,其中可自动地聚焦通过相机观察到的景物。当图像离焦时,所述图像的锐度得分减少;使用锐度得分实施自动聚焦功能性(通过基于锐度得分改变透镜与传感器之间的距离)。
可在大多数成像器中容易得到的另一类型的统计数据为流明(luma)。流明表示图像中的亮度且还可称为亮度值。像素阵列的每一像素均具有相关联的亮度值,其表达为多位数字数据值的组合(例如,红色、绿色及蓝色各为一个值)。如果使用8个位来描述红色、绿色及蓝色中的每一者,那么所述每一者的值可介于从0到255范围内。因此,对于此RGB 8位成像器,所述亮度值也可介于从0到255范围内。
图1图解说明两个图像帧(帧A及帧B),每一图像帧包括布置成4x4栅格的多个窗口30。常规自动聚焦统计引擎(例如,图3的统计引擎122)以布置成NxM栅格的一组窗口30操作并为每一窗口30提供锐度得分及平均亮度(流明)。每一窗口 30包括多个像素。所揭示实施例通过针对每一窗口计算针对两个不同帧接收的统计数据的改变使用这些数据(锐度得分及亮度)实施运动检测。帧A的多个窗口30与帧B的多个窗口30相对应,使得窗口A1与窗口B1相对应,窗口A2与窗口B2相对应,等等。
在常规自动聚焦操作中,针对每一窗口30计算锐度得分及亮度。这些值是窗口30的统计数据并在所揭示实施例中用于运动检测。存储于存储器中供在运动检测中使用的两个阈值为:(1)用于单个窗口的帧A、B之间(例如,A1与B1之间)的可接受改变量的阈值TH_ratio;及(2)用于窗口30的改变超出阈值TH_ratio的可接受量的阈值TH_motion_cnt。获得每一窗口30的两个帧A、B的统计数据且针对每一窗口30确定帧A、B之间的改变。然后,做出多少窗口30具有发生了大于TH_ratio阈值改变的统计值的确定。如果具有发生了大于TH_ratio阈值改变的统计的窗口的所确定数目大于TH_motion_cnt阈值,那么检测到运动。
现在,参照图1及图2更加详细地描述一个所揭示实施例。图2是图解说明根据所揭示实施例使用统计数据进行运动检测的方法205的各步骤的流程图。
在步骤210处,获得来自帧A的统计数据阵列、来自帧B的统计数据阵列、窗口数据改变阈值TH_ratio及最大经改变窗口数目阈值TH_motion_cnt。在此实施例中,统计数据包含每一帧A、B的每一窗口30的锐度得分及/或亮度。这些输入参数预先存储在图像流处理器110(图3)内或由所述图像流处理器110确定。在步骤220处,初始化运动计数器motion_cnt,例如将其设定为0。在步骤230处,如等式(1)中所示计算第一窗口的相对差值D1:
(1)Di=|Ai-Bi|/max(Ai,Bi),
其中Di是窗口i的差值,Ai是帧A的窗口i的统计数据的值,Bi是帧B的窗口i的统计数据的值,且max(Ai、Bi)是帧A及帧B的窗口i的统计数据值中的较高者。
应注意,所揭示实施例可仅使用锐度得分的改变或可仅使用平均亮度(流明)的改变或可使用来自这两个统计值的结果来操作,可在做出关于运动的决定时组合所述两个统计值。如果将使用所述两个统计值的组合来做出关于运动的决定,那么将Di确定为锐度得分及平均亮度中的每一者的绝对值的和除以锐度得分及平均亮度中的每一者的最大值的和。
在步骤240处,如果D1大于窗口数据改变阈值TH_ratio,那么在步骤250处递增计数器motion_cnt,如等式(2)中所示:
(2)如果Di>TH_ratio,那么motion_cnt=motion_cnt+l,
否则,计数器motion_cnt不改变。
在步骤260处,做出关于窗口i是否是帧的最后窗口30的确定。如果窗口i不是最后窗口(例如,i不等于Nwin),那么在步骤270处递增i并在步骤230处再次使用等式(1)计算下一差值(Di)。如果需要在步骤250处使用等式(2)递增计数器 motion_cnt,且再次递增i直到已针对帧中的所有窗口计算了Di为止。一旦已针对每一窗口30计算了差值,那么在步骤280处做出是否曾存在运动的确定。根据等式(3)做出此确定:
(3)如果motion_cnt>TH_motion_cnt,那么M=1,否则M=0;
其中M=1(真)对应于检测到运动且M=0(假)对应于未检测到运动。
所揭示实施例使用已收集于成像器内供在其它图像处理功能中使用的统计数据(例如,焦点)。所揭示实施例的方法提供额外益处在于添加运动检测特征的成本由于所述方法将已存在于图像流处理器110内的信息用于运动检测而为低。
在额外的所揭示实施例中,可通过针对不同窗口使用不同权数来加权运动检测,使得帧的某一部分的改变比所述帧的不同部分的改变更重要。举例来说,如果期望在图像的比周边部分中更敏感的中心部分中进行运动检测,那么所述帧的中心处的窗口将被赋予比周边处的窗口更高的权数。可根据等式(4)计算经加权的运动得分:
其中Motion_score表示图像中的总运动量(且类似于motion_cnt),Motioni是表示在成像器阵列的特定窗口i中感测到的运动量的变量,Weighti是赋予窗口i的权数,且Nwin是窗口的总数目。Motioni在统计数据的改变大于窗口i的阈值TH_ratio的情况下被设定为等于1,且在相反的情况下为等于0。
一旦计算出Motion_score,便将其与预定义的阈值TH_motion_cnt进行比较。如果Motion_score大于TH_motion_cnt,那么检测到运动。如果Motion_score小于TH_motion_cnt,那么未检测到运动。
图3图解说明根据所揭示实施例构造的单芯片***(SOC)成像器的框图。所述单芯片***可使用CCD、CMOS等任一类型的成像器技术。所述单芯片***还包含所揭示实施例的运动检测能力。
成像器100包括传感器核心200,其与连接到输出接口130的图像流处理器110通信。传感器核心200可包含像素阵列。锁相回路(PLL)244用作传感器核心200的时钟。负责图像及色彩处理的图像流处理器110包含内插线缓冲器112、抽选器线缓冲器114及色彩处理管线120。色彩处理管线120包含统计引擎122。图像流处理器110的功能中的一者是根据所揭示实施例的运动检测的性能。统计引擎122确定个别窗口(图1)的锐度得分及亮度值。
输出接口130包含输出先进先出(FIFO)并行缓冲器132及串行移动行业处理接口(MIPI)输出134,特别是在移动电话环境中将成像器100用于相机中的情况。用户可通过在成像器100芯片内将寄存器设定为配置寄存器来选择串行输出或并行输出。内部总线140将只读存储器(ROM)142、微控制器144及静态随机存取存储器(SRAM)146连接到传感器核心200、图像流处理器110及输出接口130。
所揭示实施例可由执行程序的处理器、由具有处理管线的硬件电路或由两者的组合等等作为图像流处理器110的一部分来实施。方法205可实施为计算机指令并可存储在计算机可读存储媒体上。
所揭示实施例可实施为例如数码相机或数码摄像机的相机或其它图像获取***的部分。图4图解说明作为(例如)采用如图3中所图解说明的单芯片***成像器100的数码相机或数码摄像机***800的一部分的处理器***,如上所述,所述成像器100提供运动检测。处理***包含处理器805(显示为CPU),其实施(例如)相机800的***、对穿过所述***的图像流起作用且还控制所述图像流。处理器805通过总线815与***的其它元件耦合,所述其它元件包含随机存取存储器820、例如快闪或磁盘存储器的可拆卸存储器825、用于录入数据或显示数据及/或图像的一个或一个以上输入/输出装置810及成像器100,所述总线815可以是链接处理器***组件的一个或一个以上总线或桥接器。当压下快门释放按钮842时,成像器100接收对应于穿过透镜840的所捕获图像的光。
虽然已详细地描述了所揭示实施例,但应容易地理解所述实施例并不局限于所揭示的那些实施例。而是,可修改所述实施例以并入上文中未描述的任何数目的变化、更改、替代或等效布置。
Claims (10)
1.一种用于使用成像器检测运动的方法,其包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中所述权重因数基于其所对应的所述特定窗口的相对重要性。
2.一种用于使用成像器检测运动的方法,其包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中接近所述图像帧的中心的窗口的所述权重因数高于接近所述图像帧的周边的窗口的所述权重因数。
3.一种用于使用成像器检测运动的方法,其包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于所述第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中所述运动敏感统计数据包括锐度得分、亮度值或锐度得分与亮度值的组合中的一者。
4.一种用于使用成像器检测运动的方法,其包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中所述第一阈值表示单个窗口在图像帧之间的改变量。
5.一种用于使用成像器检测运动的方法,其包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中所述第二阈值表示所述运动得分的最大值,超出所述最大值存在运动。
6.一种用于使用成像器检测运动的方法,其包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值。
7.一种成像装置,其包括:
像素阵列,所述像素阵列输出多个像素值;及
图像处理单元,其耦合到所述像素阵列,所述图像处理单元可操作以检测由所述多个像素值表示的景物中的运动,其中使用不同图像帧中的锐度得分及亮度值中的至少一者的改变检测运动;
其中每一图像帧包括多个窗口,且其中针对每一图像帧的每一窗口确定锐度得分及亮度值中的所述至少一者;
其中所述图像处理单元进一步可操作以:
针对每一窗口,使用来自第一图像帧及第二图像帧的锐度得分及亮度值中的所述至少一者确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;且
其中接近所述图像帧的中心的窗口的所述权重因数高于接近所述图像帧的周边的窗口的所述权重因数。
8.一种成像***,其包括:
透镜;
像素阵列,其用于捕获通过所述透镜接收的图像帧;及
图像处理电路,其可操作以检测所述捕获的图像帧中的运动,其中所述运动检测包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中接近所述图像帧的中心的窗口的所述权重因数高于接近所述图像帧的周边的窗口的所述权重因数。
9.一种成像***,其包括:
透镜;
像素阵列,其用于捕获通过所述透镜接收的图像帧;及
图像处理电路,其可操作以检测所述捕获的图像帧中的运动,其中所述运动检测包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值。
10.一种成像***,其包括:
透镜;
像素阵列,其用于捕获通过所述透镜接收的图像帧;及
图像处理电路,其可操作以检测所述捕获的图像帧中的运动,其中所述运动检测包括:
获得多个图像帧的运动敏感统计数据,其中每一图像帧包括多个对应窗口;
针对每一窗口,使用来自第一图像帧及第二图像帧的运动敏感统计数据确定特定窗口的相对差值,其中所述相对差值计算为特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据之间的差的绝对值除以所述特定窗口的所述第一图像帧与第二图像帧的所述运动敏感统计数据的最大值;
确定运动得分,其中所述运动得分是对运动变量乘以对应于每一窗口的权重因数的求和,且其中所述运动变量是表示在所述特定窗口中感测到的运动量的变量,其在所述相对差值大于第一阈值的情况下被设定为等于1,且在所述相对差值不大于第一阈值的情况下被设定为等于0;及
通过将所述运动得分的值与第二阈值进行比较确定是否存在运动;
其中所述运动敏感统计数据包括来自位于所述图像处理单元中的统计引擎的信息及针对所述成像***的自动聚焦操作获得的信息中的一者。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/802,728 US8233094B2 (en) | 2007-05-24 | 2007-05-24 | Methods, systems and apparatuses for motion detection using auto-focus statistics |
US11/802,728 | 2007-05-24 | ||
PCT/US2008/063844 WO2008147724A2 (en) | 2007-05-24 | 2008-05-16 | Methods, systems and apparatuses for motion detection using auto-focus statistics |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101690160A CN101690160A (zh) | 2010-03-31 |
CN101690160B true CN101690160B (zh) | 2013-02-06 |
Family
ID=39876597
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200880017362.4A Expired - Fee Related CN101690160B (zh) | 2007-05-24 | 2008-05-16 | 用于使用自动聚焦统计的运动检测的方法、***及设备 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8233094B2 (zh) |
CN (1) | CN101690160B (zh) |
GB (1) | GB2462571A (zh) |
TW (1) | TW200906174A (zh) |
WO (1) | WO2008147724A2 (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI402798B (zh) * | 2009-04-29 | 2013-07-21 | Chunghwa Picture Tubes Ltd | 具省電功能之時序控制器 |
TW201112167A (en) * | 2009-09-25 | 2011-04-01 | Primax Electronics Ltd | Image processing system with ambient sensing capability and image processing thereof |
US9161058B2 (en) * | 2010-03-27 | 2015-10-13 | Texas Instruments Incorporated | Method and system for detecting global brightness change for weighted prediction in video encoding |
US20120287031A1 (en) * | 2011-05-12 | 2012-11-15 | Apple Inc. | Presence sensing |
US8594488B1 (en) * | 2012-03-13 | 2013-11-26 | Google Inc. | Methods and systems for video retargeting using motion saliency |
JP6191160B2 (ja) * | 2012-07-12 | 2017-09-06 | ノーリツプレシジョン株式会社 | 画像処理プログラムおよび画像処理装置 |
US9154686B2 (en) * | 2013-09-25 | 2015-10-06 | Google Technology Holdings LLC | Close focus with GPU |
US10187579B1 (en) * | 2017-06-30 | 2019-01-22 | Polycom, Inc. | People detection method for auto-framing and tracking in a video conference |
US10817594B2 (en) | 2017-09-28 | 2020-10-27 | Apple Inc. | Wearable electronic device having a light field camera usable to perform bioauthentication from a dorsal side of a forearm near a wrist |
CN113711272A (zh) * | 2019-04-23 | 2021-11-26 | Oppo广东移动通信有限公司 | 用于非失实运动检测的方法及*** |
CN114363448B (zh) * | 2020-09-29 | 2024-05-24 | 北京小米移动软件有限公司 | 屏幕小窗口的亮度控制方法、装置、终端及存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020135681A1 (en) * | 2001-03-22 | 2002-09-26 | Kuang-Yao Lo | Video monitoring method involving image comparison |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3988533A (en) | 1974-09-30 | 1976-10-26 | Video Tek, Inc. | Video-type universal motion and intrusion detection system |
US6337928B1 (en) * | 1996-08-26 | 2002-01-08 | Canon Kabushiki Kaisha | Image transmission apparatus and method therefor |
GB2343318B (en) | 1998-10-26 | 2003-02-26 | Sony Uk Ltd | Video motion detection |
US20020154833A1 (en) | 2001-03-08 | 2002-10-24 | Christof Koch | Computation of intrinsic perceptual saliency in visual environments, and applications |
KR100453714B1 (ko) * | 2001-12-31 | 2004-10-20 | (주)펜타마이크로 | Mpeg 영상 압축 기술을 이용한 디지털 영상 저장장치에서의 움직임 검출 장치 및 그 방법 |
US7271830B2 (en) | 2002-02-11 | 2007-09-18 | Hewlett-Packard Development Company, L.P. | Motion detection in an image capturing device |
WO2003088648A1 (fr) * | 2002-04-17 | 2003-10-23 | Matsushita Electric Industrial Co., Ltd. | Detecteur de mouvement, systeme de traitement d'image, procede de detection de mouvement, programme, support d'enregistrement |
AU2003246185A1 (en) | 2002-06-25 | 2004-01-06 | Matsushita Electric Industrial Co., Ltd. | Motion detection device and noise reduction device using that |
JP4203736B2 (ja) | 2002-09-09 | 2009-01-07 | 日本ビクター株式会社 | 画像の動き検出装置及びコンピュータプログラム |
FI115277B (fi) | 2002-12-12 | 2005-03-31 | Plenware Group Oy | Liikkeentunnistuksen järjestäminen matkaviestimessä |
US7095786B1 (en) | 2003-01-11 | 2006-08-22 | Neo Magic Corp. | Object tracking using adaptive block-size matching along object boundary and frame-skipping when object motion is low |
JP3879692B2 (ja) | 2003-04-09 | 2007-02-14 | ソニー株式会社 | 映像信号処理装置及びそれを用いたテレビ受像機 |
US20040212678A1 (en) | 2003-04-25 | 2004-10-28 | Cooper Peter David | Low power motion detection system |
US7643055B2 (en) | 2003-04-25 | 2010-01-05 | Aptina Imaging Corporation | Motion detecting camera system |
US7535515B2 (en) | 2003-12-23 | 2009-05-19 | Ravi Ananthapur Bacche | Motion detection in video signals |
JP2005236724A (ja) | 2004-02-20 | 2005-09-02 | Victor Co Of Japan Ltd | 撮像装置および動き検出方法 |
US7190263B2 (en) | 2004-09-20 | 2007-03-13 | Motorola, Inc. | Utilizing a portable electronic device to detect motion |
US7609290B2 (en) | 2005-01-28 | 2009-10-27 | Technology Advancement Group, Inc. | Surveillance system and method |
JP2006245815A (ja) | 2005-03-01 | 2006-09-14 | Fuji Photo Film Co Ltd | 撮像装置 |
JP4708819B2 (ja) * | 2005-03-14 | 2011-06-22 | キヤノン株式会社 | 画像処理装置、方法、コンピュータプログラム及び記憶媒体 |
TW200634674A (en) | 2005-03-28 | 2006-10-01 | Avermedia Tech Inc | Surveillance system having multi-area motion-detection function |
US7639937B2 (en) | 2005-07-08 | 2009-12-29 | Aptina Imaging Corporation | Method and apparatus for auto focusing an imaging device |
US7557832B2 (en) | 2005-08-12 | 2009-07-07 | Volker Lindenstruth | Method and apparatus for electronically stabilizing digital images |
US20070058837A1 (en) | 2005-09-15 | 2007-03-15 | Honeywell International Inc. | Video motion detection using block processing |
US7983458B2 (en) * | 2005-09-20 | 2011-07-19 | Capso Vision, Inc. | In vivo autonomous camera with on-board data storage or digital wireless transmission in regulatory approved band |
US20080143840A1 (en) * | 2006-12-19 | 2008-06-19 | Texas Instruments Incorporated | Image Stabilization System and Method for a Digital Camera |
-
2007
- 2007-05-24 US US11/802,728 patent/US8233094B2/en active Active
-
2008
- 2008-05-16 CN CN200880017362.4A patent/CN101690160B/zh not_active Expired - Fee Related
- 2008-05-16 WO PCT/US2008/063844 patent/WO2008147724A2/en active Application Filing
- 2008-05-23 TW TW097119298A patent/TW200906174A/zh unknown
-
2009
- 2009-12-17 GB GB0922105A patent/GB2462571A/en not_active Withdrawn
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020135681A1 (en) * | 2001-03-22 | 2002-09-26 | Kuang-Yao Lo | Video monitoring method involving image comparison |
Non-Patent Citations (2)
Title |
---|
姜丽芬.安全监控***中的运动检测和运动方向的判定.《天津师范大学学报(自然科学版)》.2004,第24卷(第2期),55-57. |
安全监控***中的运动检测和运动方向的判定;姜丽芬;《天津师范大学学报(自然科学版)》;20040630;第24卷(第2期);55-57页 * |
Also Published As
Publication number | Publication date |
---|---|
WO2008147724A2 (en) | 2008-12-04 |
WO2008147724A3 (en) | 2009-02-19 |
TW200906174A (en) | 2009-02-01 |
GB0922105D0 (en) | 2010-02-03 |
US20080291333A1 (en) | 2008-11-27 |
CN101690160A (zh) | 2010-03-31 |
US8233094B2 (en) | 2012-07-31 |
GB2462571A (en) | 2010-02-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101690160B (zh) | 用于使用自动聚焦统计的运动检测的方法、***及设备 | |
US11882357B2 (en) | Image display method and device | |
US8184196B2 (en) | System and method to generate depth data using edge detection | |
WO2021164234A1 (zh) | 图像处理方法以及图像处理装置 | |
CN102740082B (zh) | 图像处理装置及控制方法 | |
WO2019037739A1 (zh) | 图像处理参数获取方法、可读存储介质和计算机设备 | |
US20020196355A1 (en) | Image processing method, image processing program, image processing apparatus, and digital still camera using the image processing apparatus | |
CN103905727A (zh) | 被摄体区域跟踪设备及其控制方法 | |
US8798369B2 (en) | Apparatus and method for estimating the number of objects included in an image | |
CN113518210A (zh) | 图像自动白平衡的方法及装置 | |
CN109089041A (zh) | 拍摄场景的识别方法、装置、电子设备和存储介质 | |
CN107040697A (zh) | 使用凝视检测的摄影方法以及相关相机*** | |
CN116762356A (zh) | 具有多深度的对象的场景的图像融合 | |
JP2015192338A (ja) | 画像処理装置および画像処理プログラム | |
US20040028137A1 (en) | Motion detection camera | |
WO2023140979A1 (en) | Motion based exposure control for high dynamic range imaging | |
JP2012127700A (ja) | 画像処理装置およびその方法 | |
JP2018152095A (ja) | 画像処理装置、撮像装置及び画像処理プログラム | |
JP2019008830A (ja) | 被写体検出装置、撮像装置及びプログラム | |
JP6326841B2 (ja) | 画像処理装置、撮像装置及び画像処理プログラム | |
JP6248662B2 (ja) | 画像処理装置、撮像装置及び画像処理プログラム | |
JP6318661B2 (ja) | 被写体検出装置、撮像装置及び画像処理プログラム | |
JP6326840B2 (ja) | 画像処理装置、撮像装置及び画像処理プログラム | |
KR20170012666A (ko) | 이동 물체 검출 장치 및 그 제어 방법 | |
JP6405638B2 (ja) | 被写体検出装置、撮像装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130206 Termination date: 20210516 |
|
CF01 | Termination of patent right due to non-payment of annual fee |