CN102769717B - 影像处理方法与装置 - Google Patents

影像处理方法与装置 Download PDF

Info

Publication number
CN102769717B
CN102769717B CN201110174865.6A CN201110174865A CN102769717B CN 102769717 B CN102769717 B CN 102769717B CN 201110174865 A CN201110174865 A CN 201110174865A CN 102769717 B CN102769717 B CN 102769717B
Authority
CN
China
Prior art keywords
mrow
msub
image
effective area
mfrac
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110174865.6A
Other languages
English (en)
Other versions
CN102769717A (zh
Inventor
庄哲纶
吴宗达
周宏隆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Altek Corp
Original Assignee
Altek Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Altek Corp filed Critical Altek Corp
Publication of CN102769717A publication Critical patent/CN102769717A/zh
Application granted granted Critical
Publication of CN102769717B publication Critical patent/CN102769717B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/689Motion occurring during a rolling shutter mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • H04N25/531Control of the integration time by controlling rolling shutters in CMOS SSIS

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明提出一种影像处理方法与装置。影像处理方法包括将各原始影像规划为K个分区,K为大于等于1的正整数。计算任二相邻的原始影像的各分区的多数个区块位移量,并依据各分区的区块位移量计算出各分区的全域位移量。且分别依据全域位移量及获取时间差,产生各分区的水平分量速度及垂直分量速度。此外,依据水平分量速度、垂直分量速度、获取时间差、有效区域的宽度及像素点位置,产生对应分区的多数个转换矩阵。再者,针对任二相邻的原始影像其中之一依据转换矩阵进行转换,并藉以产生补偿后影像,进而改善影像失真的问题。

Description

影像处理方法与装置
技术领域
本发明涉及一种影像处理方法与装置,尤其涉及一种补偿滚动快门所造成影像失真的影像处理方法。
背景技术
数字相机的影像传感器主要可分为两大类,一种为CCD影像传感器,另一种则为CMOS影像传感器。这两种影像传感器其中一项重要的不同点在于影像传感器的读取机制,CCD影像传感器为同步快门机制,而CMOS影像传感器则为滚动快门(rolling shutter)机制。
滚动快门机制指的是CMOS影像传感器每次曝光影像的一列像素,每一列的总曝光时间均相同,但是每一列的曝光起始时间点并不同,影像中每一列的曝光起始时间点具有一定的延迟时间。因此,若使用CMOS影像传感器的数字相机所拍摄的物体与数字相机之间不存在相对移动的情况,则滚动快门机制并不会产生任何问题,若拍摄的物体与数字相机之间存在着相对移动,则会产生影像失真。
图1(a)-(e)为滚动快门造成影像失真的示意图。请配合参照图1(a)-(e),图1(a)-(e)的第一列110代表无失真影像,第二列120代表失真影像,第三列130则代表相对移动的方向,斜线部分为影像的有效区域。若相对移动的方向为水平方向,如图1(a)与图1(b)所示,则数字相机所拍摄出的影像会产生歪斜现象;若相对移动的方向为垂直方向,如图1(c)与图1(d)所示,则影像会产生压缩或拉长的失真现象;若相对移动的方向剧烈变化时,如图1(e)所示,则影像会产生如波浪般的扭曲现象。
发明内容
有鉴于此,本发明提供一种影像处理方法,藉由速度的估测来产生转换矩阵,将失真影像依据转换矩阵进行转换以产生补偿后影像,进而改善影像失真的问题。
本发明提供一种影像处理装置,能对影像进行速度估测,藉以产生转换矩阵,并且输出补偿后影像。
本发明提出一种影像处理方法,依据获取时间差连续获取多数个原始影像,原始影像的有效区域尺寸为M×N,其中,M为有效区域的长度,N为有效区域的宽度,M及N为正整数。影像处理方法包括将各原始影像规划为K个分区,K为大于等于1的正整数。并计算任二相邻的原始影像的各分区的多数个区块位移量,并依据各分区的区块位移量计算出各分区的全域位移量。且分别依据全域位移量及获取时间差,产生各分区的水平分量速度及垂直分量速度。此外,依据水平分量速度、垂直分量速度、获取时间差、有效区域的宽度及像素点位置,产生对应分区的多数个转换矩阵。再者,针对任二相邻的原始影像其中之一依据转换矩阵进行转换,并藉以产生补偿后影像。
其中,转换矩阵A为一个3×3的矩阵,矩阵的元素为水平分量速度vx、垂直分量速度vy、获取时间差τ、有效区域的宽度N以及像素点位置y1的函数,其中,利用全域位移量的水平分量与获取时间差τ的比值来计算出一个水平分量速度vx,利用全域位移量的垂直分量与获取时间差τ的比值来计算出一个垂直分量速度vy,转换矩阵A表示为如下所示:
A = a 11 a 12 a 13 a 21 a 22 a 23 0 0 1 ,
其中,a11=1,a21=0,a13=vxτy1 a 23 = v y τ y 1 1 - v y τ , a 12 = v x τ ( N - 1 ) N + v x τ ( N - 1 ) 1 - v y τ , a11与a22所代表的物理意义是为了补偿影像压缩或拉长的失真现象,a13与a23所代表的物理意义是为了补偿位移量,a12与a21所代表的物理意义是为了补偿扭曲变形量。
在本发明的一实施例中,其中分别针对水平分量速度及垂直分量速度进行平滑化处理,以产生对应分区的多数个平滑水平分量速度及多数个平滑垂直分量速度。
在本发明的一实施例中,其中依据水平分量速度、垂直分量速度、获取时间差、有效区域的宽度及像素点位置,产生对应分区的转换矩阵的步骤包括依据平滑水平分量速度、平滑垂直分量速度、获取时间差、有效区域的宽度及像素点位置,产生对应分区的转换矩阵。
在本发明的一实施例中,其中还包括依据有效区域的长度及有效区域的宽度,产生缩放矩阵。并且针对补偿后影像利用此缩放矩阵,产生使用者观看影像。
其中缩放矩阵B亦为一3×3的矩阵,矩阵的第一列第一行元素为该使用者观看影像的有效区域的长度M’与有效区域的长度M的比值,矩阵的第二列第二行元素为该使用者观看影像的有效区域的宽度N’与有效区域的宽度N的比值,缩放矩阵B表示为如下所示:
B = b 11 0 0 0 b 22 0 0 0 1 ,
其中, b 11 = M ′ M b 22 = N ′ N .
在本发明的一实施例中,所述的使用者观看影像的有效区域为M’×N’,其中,M’及N’为正整数。
从另一观点来看,本发明提出一种影像处理装置,依据获取时间差连续获取多数个原始影像,原始影像的有效区域尺寸为M×N,其中,M为有效区域的长度,N为有效区域的宽度,M及N为正整数。影像处理装置包括速度估测模块以及补偿器。速度估测模块将各原始影像规划为K个分区,K为大于等于1的正整数。计算任二相邻的原始影像的各分区的多数个区块位移量,并依据各分区的区块位移量计算出各分区的全域位移量。分别依据全域位移量及获取时间差,产生分区的多数个水平分量速度及多数个垂直分量速度。补偿器耦接至速度估测模块,补偿器依据水平分量速度、垂直分量速度、获取时间差、有效区域的宽度及像素点位置,产生对应分区的多数个转换矩阵。并针对任二相邻的原始影像其中之一依据转换矩阵进行转换,并藉以产生补偿后影像。
其中,转换矩阵A为一个3×3的矩阵,矩阵的元素为水平分量速度vx、垂直分量速度vy、获取时间差τ、有效区域的宽度N以及像素点位置y1的函数,其中,利用全域位移量的水平分量与获取时间差τ的比值来计算出一个水平分量速度vx,利用全域位移量的垂直分量与获取时间差τ的比值来计算出一个垂直分量速度vy,转换矩阵A表示为如下所示:
A = a 11 a 12 a 13 a 21 a 22 a 23 0 0 1 ,
其中,a11=1,a21=0,a13=vxτy1 a 23 = v y τ y 1 1 - v y τ , a 12 = v x τ ( N - 1 ) N + v x τ ( N - 1 ) 1 - v y τ , a11与a22所代表的物理意义是为了补偿影像压缩或拉长的失真现象,a13与a23所代表的物理意义是为了补偿位移量,a12与a21所代表的物理意义是为了补偿扭曲变形量。
在本发明的一实施例中,所述的影像处理装置还包括平均速度产生器,串接于速度估测模块与补偿器之间,分别针对水平分量速度及垂直分量速度进行平滑化处理,并传送经过平滑化处理后的水平分量速度及垂直分量速度至补偿器。
基于上述,因滚动快门所造成的影像产生歪斜、压缩、伸长及扭曲等现象的失真影像,可藉由本发明的区块位移量以及全域位移量的信息来进行速度的估测,并藉以产生转换矩阵,将失真影像依据转换矩阵进行转换以产生补偿后影像,进而改善影像失真的问题。
为让本发明的上述特征和优点能更明显易懂,下文特举实施例,并配合附图作详细说明如下。
附图说明
图1(a)-(e)为滚动快门造成影像失真的示意图。
图2是依照本发明的一实施例所显示的影像处理方法的流程图。
图3(a)-(c)是依照本发明的一实施例所显示的影像补偿示意图。
图4是依照本发明的一实施例所显示的影像分区示意图。
图5是依照本发明的一实施例所显示的影像处理装置的方块图。
主要组件符号说明
310~330:有效区域区块
BAND_1~BAND_h:分区
LM11~LMhd:区块
50:影像处理装置
510:速度估测模块
520:平均速度产生器
530:补偿器
S210~S270:步骤
具体实施方式
图2是依照本发明的一实施例所显示的影像处理方法的流程图。图3(a)-(c)是依照本发明的一实施例所显示的影像补偿示意图,请配合参照图2与图3。首先可利用具CMOS影像传感器的影像处理装置连续拍摄多张原始影像,原始影像的有效区域尺寸为M×N,其中,M为有效区域的长度,N为有效区域的宽度,M及N为正整数,如图3(a)与图3(b)所示。首先,如步骤S210所示,将各原始影像规划为K个分区,K为大于等于1的正整数。以下分别举K等于1以及K大于1为例作说明。
当K等于1时,代表整张原始影像只有一个分区。步骤S220计算任二相邻的原始影像的各分区的多数个区块位移量,并依据各分区的区块位移量计算出各分区的一全域位移量。因此,本领域的普通技术人员都知道,可将原始影像以区块比对等方法计算出二个连续影像之间的多数个区块位移量,并可依据这些区块位移量计算出全域位移量,举例来说,可对多数个区块位移量取众数,也就是先将区块位移量进行统计,选择出现最多次的区块位移量作为全域位移量,或是将所有的区块位移量做平均而得到全域位移量等等。在本实施例中,因为K等于1代表只有一个分区,因此,二个连续影像之间仅计算出一个全域位移量。
接下来在步骤S230中,分别依据全域位移量及获取时间差,产生分区的多数个水平分量速度及多数个垂直分量速度。具CMOS影像传感器的影像处理装置会间隔一获取时间差τ连续拍摄二个影像,而全域位移量包含了水平分量及垂直分量,因此,利用全域位移量的水平分量与获取时间差τ的比值可计算出一个水平分量速度vx,利用全域位移量的垂直分量与获取时间差τ的比值可计算出一个垂直分量速度vy。接着,依据上述水平分量速度vx、垂直分量速度vy、获取时间差τ、有效区域的宽度N及像素点位置,产生对应分区的多数个转换矩阵(步骤S240)。
图3(a)所示的有效区域区块310代表的是具CMOS影像传感器的影像处理装置因为滚动快门机制所拍摄出原始影像具歪斜现象,此歪斜现象代表了影像处理装置与所拍摄物体之间存在着相对移动。为了补偿此种影像失真现象,以使图3(a)所示的原始影像能还原成如图3(b)所示的未失真影像,必须找出有效区域区块310与有效区域区块320之间的对应关系。假设有效区域区块310第一个像素点的位置为(x1,y1),经过推导,在本实施例中,有效区域区块310与有效区域区块320之间可利用转换矩阵A做转换。其中,转换矩阵A为一个3×3的矩阵,矩阵的元素为水平分量速度vx、垂直分量速度vy、获取时间差τ、有效区域的宽度N以及像素点位置y1的函数。转换矩阵A并可表示为如下所示:
A = a 11 a 12 a 13 a 21 a 22 a 23 0 0 1
其中,a11=1,a21=0,a13=vxτy1 a 23 = v y τ y 1 1 - v y τ
a 12 = v x τ ( N - 1 ) N + v x τ ( N - 1 ) 1 - v y τ a 22 = N + v y τ ( N - 1 ) 1 - v y τ N
a11与a22所代表的物理意义是为了补偿影像压缩或拉长的失真现象;a13与a23所代表的物理意义是为了补偿位移量;a12与a21所代表的物理意义是为了补偿扭曲变形量。
在获得转换矩阵A后,便可将二个连续影像中的第二张影像利用转换矩阵A做转换,以产生如图3(b)的补偿后影像(步骤S250)。
由于图3(a)与图3(b)的影像尺寸为影像处理装置所获取的影像尺寸,若要进一步地将影像转换成使用者实际观看的影像,如图3(c)所示,使用者观看影像的有效区域为M’×N’。其中,M’为使用者观看影像的有效区域的长度,N’为使用者观看影像的有效区域的宽度,M’及N’为正整数。因此,可再依据步骤S260所述,依据有效区域的长度M及有效区域的宽度N,产生一个缩放矩阵B。在本实施例中,缩放矩阵B亦为一3×3的矩阵,矩阵的第一列第一行元素为使用者观看影像的有效区域的长度M’与有效区域的长度M的比值。矩阵的第二列第二行元素为使用者观看影像的有效区域的宽度N’与有效区域的宽度N的比值。缩放矩阵B可以表示为如下所示:
B = b 11 0 0 0 b 22 0 0 0 1
其中,且 b 11 = M ′ M b 22 = N ′ N
利用此缩放矩阵B对上述补偿后影像进行转换,也就是说,将有效区域区块320与有效区域区块330之间利用缩放矩阵B做转换,即可产生使用者观看影像(步骤S270)。
必须说明地是,在K等于1的实施例中,由于每两张影像之间,仅有一个水平分量速度vx以及一个垂直分量速度vy,因此只求出一个转换矩阵A,仅能用以补偿如图1(a)至图1(d)的影像失真。图1(a)至图1(d)代表的是影像处理装置与所拍摄的物体之间的相对移动是同一个方向且相对移动的速度较缓。当影像处理装置与所拍摄的物体之间的相对移动不只一个方向且相对移动的速度较快时,如图1(e)所示,则如下所述的K大于1的实施例可用来补偿波浪般扭曲的影像失真问题。
当K大于1时,代表影像有多数个分区,如图4所示,图4是依照本发明的一实施例所显示的影像分区示意图。请参照图4,此影像共分成h个分区,第1个分区BAND_1至第h个分区BAND_h。其中,每个分区又可分成d个区块,因此,第1个分区BAND_1的第1个区块标示为LM11,第h个分区BAND_h的第d个区块LMhd,依此类推。在步骤S220中,计算任二相邻的原始影像的各分区的d个区块位移量,并依据各分区的d个区块位移量计算出各分区的全域位移量。也就是说,各个分区有各自的全域位移量,例如第1个分区BAND_1的全域位移量GM1,第2个分区BAND_2的全域位移量GM2,依此类推,第h个分区BAND_h的全域位移量GMh
同样地,在步骤S230中,分别依据全域位移量及获取时间差τ,产生各分区的多数个水平分量速度及多数个垂直分量速度。第1个分区BAND_1的全域位移量GM1的水平分量与获取时间差τ的比值可计算出一个水平分量速度vx1。第1个分区BAND_1的全域位移量GM1的垂直分量与获取时间差τ的比值可计算出一个垂直分量速度vy1。因此,在本实施例中,共有h个水平分量速度vx1~vxh以及h个垂直分量速度vy1~vyh
在本实施例中是用以解决如波浪般扭曲的影像失真,代表各个分区之间的水平分量速度vx1~vxh以及垂直分量速度vy1~vyh可能会相距较大,因此可针对水平分量速度vx1~vxh及垂直分量速度vy1~vyh进行平滑化处理,以产生对应各分区的多数个平滑水平分量速度及多数个平滑垂直分量速度。平滑化处理可为加权平均等方法,举例而言,第2个分区的水平分量速度vx2可由下列式子进行加权平均:
v x 2 = v x 1 + 2 × v x 2 + v x 3 4
因此,依据上述经过平滑化处理所得到的平滑水平分量速度、平滑垂直分量速度、获取时间差、有效区域的宽度及像素点位置,即可产生对应各个分区的转换矩阵A1~Ah(S240)。接着,便可将二个连续影像中的第二张影像的每个区块依据各自的转换矩阵做转换,以得到补偿后影像(S250)。
对应上述各实施例的影像处理方法,本发明另提出一种影像处理装置。图5是依照本发明的一实施例所显示的影像处理装置的方块图。请参照图5,影像处理装置50包括速度估测模块510以及补偿器530。速度估测模块510将各原始影像规划为K个分区,K为大于等于1的正整数,计算任二相邻的原始影像的各分区的多数个区块位移量,并依据各分区的区块位移量计算出各分区的全域位移量,分别依据全域位移量及获取时间差,产生分区的多数个水平分量速度及多数个垂直分量速度。
补偿器530耦接至速度估测模块510,补偿器530接收速度估测模块510所产生的水平分量速度及垂直分量速度。并依据此水平分量速度、此垂直分量速度、获取时间差、有效区域的宽度及像素点位置,产生对应分区的多数个转换矩阵。补偿器530依据转换矩阵对任二相邻的原始影像其中的一进行转换,藉以产生补偿后影像。
在另一实施例中,影像处理装置50还可包括平均速度产生器520。平均速度产生器520串接于速度估测模块510与补偿器530之间。将接收自速度估测模块510的水平分量速度及垂直分量速度进行平滑化处理,并传送经过平滑化处理后的水平分量速度及垂直分量速度至补偿器530。至于本实施例的细部流程,已在上述各实施例中描述,故在此不多赘述。
综上所述,具CMOS影像传感器的影像处理装置因滚动快门机制所造成的影像产生歪斜、压缩、伸长及扭曲等现象的失真影像,可藉由本发明的区块位移量、全域位移量及影像获取时间差的信息来进行速度的估测,并藉以产生转换矩阵,将失真影像依据转换矩阵进行转换以产生补偿后影像,进而改善影像失真的问题。
虽然本发明已以实施例揭示如上,然其并非用以限定本发明,任何所属技术领域中的普通技术人员,当可作些许的更动与润饰,而不脱离本发明的精神和范围。

Claims (9)

1.一种影像处理方法,依据一获取时间差连续获取多数个原始影像,所述原始影像的有效区域尺寸为M×N,其中,M为一有效区域的长度,N为一有效区域的宽度,M及N为正整数,包括:
将各该原始影像规划为K个分区,K为大于等于1的正整数;
计算任二相邻的原始影像的各该分区的多数个区块位移量,并依据各该分区的所述区块位移量计算出各该分区的一全域位移量;
分别依据所述全域位移量及该获取时间差,产生所述分区的多数个水平分量速度及多数个垂直分量速度;
依据所述水平分量速度、所述垂直分量速度、该获取时间差、该有效区域的宽度及一像素点位置,产生对应所述分区的多数个转换矩阵;以及
针对该任二相邻的原始影像其中之一依据所述转换矩阵进行转换,并藉以产生一补偿后影像;
其中,转换矩阵A为一个3×3的矩阵,矩阵的元素为水平分量速度vx、垂直分量速度vy、获取时间差τ、有效区域的宽度N以及像素点位置y1的函数,其中,利用全域位移量的水平分量与获取时间差τ的比值来计算出一个水平分量速度vx,利用全域位移量的垂直分量与获取时间差τ的比值来计算出一个垂直分量速度vy,转换矩阵A表示为如下所示:
A = a 11 a 12 a 13 a 21 a 22 a 23 0 0 1 ,
其中,a11=1,a21=0,a13=vxτy1 a 23 = v y τ y 1 1 - v y τ , a 12 = v x τ ( N - 1 ) N + v x τ ( N - 1 ) 1 - v y τ , a11与a22所代表的物理意义是为了补偿影像压缩或拉长的失真现象,a13与a23所代表的物理意义是为了补偿位移量,a12与a21所代表的物理意义是为了补偿扭曲变形量。
2.根据权利要求1所述的影像处理方法,其中还包括:
分别针对所述水平分量速度及所述垂直分量速度进行一平滑化处理,以产生对应所述分区的多数个平滑水平分量速度及多数个平滑垂直分量速度。
3.根据权利要求2所述的影像处理方法,其中依据所述水平分量速度、所述垂直分量速度、该获取时间差、该有效区域的宽度及该像素点位置,产生对应所述分区的所述转换矩阵的步骤包括:
依据所述平滑水平分量速度、所述平滑垂直分量速度、该获取时间差、该有效区域的宽度及该像素点位置,产生对应所述分区的所述转换矩阵。
4.根据权利要求1所述的影像处理方法,其中还包括:
依据该有效区域的长度及该有效区域的宽度,产生一缩放矩阵;以及
针对该补偿后影像利用该缩放矩阵,产生一使用者观看影像;
其中缩放矩阵B亦为一3×3的矩阵,矩阵的第一列第一行元素为该使用者观看影像的有效区域的长度M’与有效区域的长度M的比值,矩阵的第二列第二行元素为该使用者观看影像的有效区域的宽度N’与有效区域的宽度N的比值,缩放矩阵B表示为如下所示:
B = b 11 0 0 0 b 22 0 0 0 1 ,
其中, b 11 = M ′ M b 22 = N ′ N .
5.根据权利要求4所述的影像处理方法,其中该使用者观看影像的有效区域为M’×N’,其中,M’及N’为正整数。
6.一种影像处理装置,依据一获取时间差连续获取多数个原始影像,所述原始影像的有效区域尺寸为M×N,其中,M为一有效区域的长度,N为一有效区域的宽度,M及N为正整数,该影像处理装置包括:
一速度估测模块,将各该原始影像规划为K个分区,K为大于等于1的正整数,计算任二相邻的原始影像的各该分区的多数个区块位移量,并依据各该分区的所述区块位移量计算出各该分区的一全域位移量,分别依据所述全域位移量及该获取时间差,产生所述分区的多数个水平分量速度及多数个垂直分量速度;以及
一补偿器,耦接至该速度估测模块,依据所述水平分量速度、所述垂直分量速度、该获取时间差、该有效区域的宽度及一像素点位置,该补偿器产生对应所述分区的多数个转换矩阵,并针对该任二相邻的原始影像其中之一依据所述转换矩阵进行转换,并藉以产生一补偿后影像;
其中,转换矩阵A为一个3×3的矩阵,矩阵的元素为水平分量速度vx、垂直分量速度vy、获取时间差τ、有效区域的宽度N以及像素点位置y1的函数,其中,利用全域位移量的水平分量与获取时间差τ的比值来计算出一个水平分量速度vx,利用全域位移量的垂直分量与获取时间差τ的比值来计算出一个垂直分量速度vy,转换矩阵A表示为如下所示:
A = a 11 a 12 a 13 a 21 a 22 a 23 0 0 1 ,
其中,a11=1,a21=0,a13=vxτy1 a 23 = v y τ y 1 1 - v y τ , a 12 = v x τ ( N - 1 ) N + v x τ ( N - 1 ) 1 - v y τ , a11与a22所代表的物理意义是为了补偿影像压缩或拉长的失真现象,a13与a23所代表的物理意义是为了补偿位移量,a12与a21所代表的物理意义是为了补偿扭曲变形量。
7.根据权利要求6所述的影像处理装置,还包括:
一平均速度产生器,串接于该速度估测模块与该补偿器之间,分别针对所述水平分量速度及所述垂直分量速度进行一平滑化处理,并传送经过该平滑化处理后的所述水平分量速度及所述垂直分量速度至该补偿器。
8.根据权利要求6所述的影像处理装置,其中该补偿器依据该有效区域的长度及该有效区域的宽度,产生一缩放矩阵,并针对该补偿后影像利用该缩放矩阵,产生一使用者观看影像;
其中缩放矩阵B亦为一3×3的矩阵,矩阵的第一列第一行元素为该使用者观看影像的有效区域的长度M’与有效区域的长度M的比值。矩阵的第二列第二行元素为该使用者观看影像的有效区域的宽度N’与有效区域的宽度N的比值。缩放矩阵B表示为如下所示:
B = b 11 0 0 0 b 22 0 0 0 1 ,
其中, b 11 = M ′ M b 22 = N ′ N .
9.根据权利要求8所述的影像处理装置,其中该使用者观看影像的有效区域为M’×N’,其中,M’及N’为正整数。
CN201110174865.6A 2011-05-04 2011-06-27 影像处理方法与装置 Expired - Fee Related CN102769717B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW100115617A TWI435286B (zh) 2011-05-04 2011-05-04 影像處理方法與裝置
TW100115617 2011-05-04

Publications (2)

Publication Number Publication Date
CN102769717A CN102769717A (zh) 2012-11-07
CN102769717B true CN102769717B (zh) 2014-12-24

Family

ID=47089996

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110174865.6A Expired - Fee Related CN102769717B (zh) 2011-05-04 2011-06-27 影像处理方法与装置

Country Status (3)

Country Link
US (1) US8576308B2 (zh)
CN (1) CN102769717B (zh)
TW (1) TWI435286B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10845198B2 (en) * 2017-03-14 2020-11-24 Trimble Inc. Integrated vision-based and inertial sensor systems for use in vehicle navigation
JP2019211223A (ja) * 2018-05-31 2019-12-12 コニカミノルタ株式会社 画像処理装置、過積載検出装置、過積載検出システム及びプログラム
TWI686772B (zh) * 2019-03-21 2020-03-01 國立清華大學 利用壓縮感知的資料還原方法以及電腦程式產品

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1972363A (zh) * 2005-11-21 2007-05-30 仁宝电脑工业股份有限公司 一种还原影像画面方法
CN101815163A (zh) * 2009-02-19 2010-08-25 索尼公司 图像处理设备及程序和焦平面失真分量计算方法
TW201103314A (en) * 2009-07-03 2011-01-16 Altek Corp Dynamic image pickup method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5592228A (en) * 1993-03-04 1997-01-07 Kabushiki Kaisha Toshiba Video encoder using global motion estimation and polygonal patch motion estimation
US6665450B1 (en) * 2000-09-08 2003-12-16 Avid Technology, Inc. Interpolation of a sequence of images using motion analysis
JP2006174415A (ja) * 2004-11-19 2006-06-29 Ntt Docomo Inc 画像復号装置、画像復号プログラム、画像復号方法、画像符号化装置、画像符号化プログラム及び画像符号化方法
US20060291751A1 (en) * 2004-12-16 2006-12-28 Peyman Milanfar Robust reconstruction of high resolution grayscale images from a sequence of low-resolution frames (robust gray super-resolution)
US7982776B2 (en) * 2007-07-13 2011-07-19 Ethicon Endo-Surgery, Inc. SBI motion artifact removal apparatus and method
EP2214403B1 (en) * 2007-12-03 2012-07-25 Panasonic Corporation Image processing device, photographing device, reproducing device, integrated circuit, and image processing method
JP4915424B2 (ja) * 2009-02-19 2012-04-11 ソニー株式会社 画像処理装置、カメラモーション成分算出方法、画像処理プログラム及び記録媒体
US8830359B2 (en) * 2010-03-30 2014-09-09 Nikon Corporation Image processing apparatus, imaging apparatus, and computer readable medium

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1972363A (zh) * 2005-11-21 2007-05-30 仁宝电脑工业股份有限公司 一种还原影像画面方法
CN101815163A (zh) * 2009-02-19 2010-08-25 索尼公司 图像处理设备及程序和焦平面失真分量计算方法
TW201103314A (en) * 2009-07-03 2011-01-16 Altek Corp Dynamic image pickup method

Also Published As

Publication number Publication date
US20120281120A1 (en) 2012-11-08
TWI435286B (zh) 2014-04-21
CN102769717A (zh) 2012-11-07
TW201246127A (en) 2012-11-16
US8576308B2 (en) 2013-11-05

Similar Documents

Publication Publication Date Title
US9275463B2 (en) Stereo image processing device and stereo image processing method
CN103503432B (zh) 图像处理装置、图像处理方法
US8462219B2 (en) Image pickup apparatus and image processing method of a picked-up image
US9117271B2 (en) Apparatus, method and recording medium for image processing
CN103763483A (zh) 一种移动终端拍照防抖方法、装置以及移动终端
CN102113013A (zh) 视差检测装置、测距装置及视差检测方法
JP2011227578A (ja) 画像処理装置、撮像装置、プログラム及び画像処理方法
US8711231B2 (en) Digital image processing device and processing method thereof
JP2009182527A (ja) 撮像方法および撮像装置
CN102769717B (zh) 影像处理方法与装置
US20130135430A1 (en) Method for adjusting moving depths of video
JP2018074361A (ja) 撮像装置、撮像方法およびプログラム
US9247188B2 (en) Image capturing apparatus, image capturing system, and image capturing method that performs inverse transform processing on an image using an inverse transform filter
JP6477193B2 (ja) 画像処理装置および画像処理方法
US9237269B2 (en) Image processing device, image processing method, and computer program product
CN103167226A (zh) 产生全景深影像的方法及装置
JP6557499B2 (ja) 焦点検出装置およびその制御方法、撮像装置、プログラム、ならびに記憶媒体
JP6614824B2 (ja) 画像処理装置、画像処理システム、撮像装置、画像処理方法およびプログラム
CN103442159A (zh) 基于rs-svm集成的边缘自适应去马赛克方法
CN102244729B (zh) 摄像设备及其控制方法
JP6604783B2 (ja) 画像処理装置、撮像装置および画像処理プログラム
US8379933B2 (en) Method of determining shift between two images
JP6728005B2 (ja) 撮像装置、撮像方法およびプログラム
JP5871113B2 (ja) 立体画像生成装置、立体画像生成方法及び立体画像生成プログラム
JP2020194400A (ja) 画像処理装置、画像処理方法、及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20141224

Termination date: 20190627

CF01 Termination of patent right due to non-payment of annual fee