CN108307118A - 一种基于惯导参数流形优化的低延时视频稳像方法 - Google Patents
一种基于惯导参数流形优化的低延时视频稳像方法 Download PDFInfo
- Publication number
- CN108307118A CN108307118A CN201810137388.8A CN201810137388A CN108307118A CN 108307118 A CN108307118 A CN 108307118A CN 201810137388 A CN201810137388 A CN 201810137388A CN 108307118 A CN108307118 A CN 108307118A
- Authority
- CN
- China
- Prior art keywords
- mobile device
- manifold
- video
- inertial navigation
- formula
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000006641 stabilisation Effects 0.000 title claims abstract description 29
- 238000011105 stabilization Methods 0.000 title claims abstract description 29
- 238000005457 optimization Methods 0.000 title claims abstract description 14
- 239000011159 matrix material Substances 0.000 claims abstract description 45
- 238000001914 filtration Methods 0.000 claims abstract description 28
- 238000013519 translation Methods 0.000 claims abstract description 21
- 230000009466 transformation Effects 0.000 claims abstract description 8
- 230000008569 process Effects 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 8
- 238000003384 imaging method Methods 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 3
- NAWXUBYGYWOOIX-SFHVURJKSA-N (2s)-2-[[4-[2-(2,4-diaminoquinazolin-6-yl)ethyl]benzoyl]amino]-4-methylidenepentanedioic acid Chemical compound C1=CC2=NC(N)=NC(N)=C2C=C1CCC1=CC=C(C(=O)N[C@@H](CC(=C)C(O)=O)C(O)=O)C=C1 NAWXUBYGYWOOIX-SFHVURJKSA-N 0.000 claims description 2
- 238000012545 processing Methods 0.000 abstract description 6
- 238000009499 grossing Methods 0.000 abstract description 2
- 230000000694 effects Effects 0.000 description 9
- 230000001934 delay Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/277—Analysis of motion involving stochastic approaches, e.g. using Kalman filters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
Abstract
本发明涉及一种基于惯导航参数流形优化的低延时视频稳像方法,属于视频处理技术领域。包括以下步骤:获取移动设备的惯导参数,根据该参数计算移动设备在相机坐标系中的刚体变换的旋转矩阵,将该旋转矩阵序列表示为由刚体变换组成的李群流形,然后通过流形上的卡尔曼滤波对刚体变换序列进行平滑,最后通过投影对视频帧进行运动的补偿变换,得到稳定的视频。与已有的方法相比,该方法直接获取移动设备的运动参数,避免了运动估计中的大量计算以及对视频拍摄场景的依赖;且将运动平滑部分整合到李群流形的卡尔曼滤波算法中,提高了计算效率,节省了计算时间,实现了低延时稳像处理。
Description
技术领域
本发明涉及一种视频稳像方法,特别涉及一种基于惯性导航参数(简称惯导参数)流形优化的低延时的视频稳像方法,属于视频处理技术领域。
背景技术
随着电子技术的发展,手机、摄像机等视频采集设备的普及性越来越高。电子设备的轻量化、廉价化促使视频拍摄成为人们娱乐生活中重要的一部分。但是,便携式视频拍摄设备的质量较轻,操作者不可避免产生晃动,另外业余爱好者缺少三脚架、云台等稳定设备,因此拍摄时,摄像机会产生一定程度的抖动,导致采集到的视频数据不稳定。不稳定的视频不仅对人们的视觉效果有较大的影响,对于视频图像的后续处理也十分不利。正是由于不稳定的视频存在诸多的负面影响,视频稳像技术具有非常重要的现实意义。
伴随着智能终端设备占据主流市场,智能传感器的使用越来越普及,以及人们对于应用时效性的要求越来越高,在视频稳像时,往往需要对视频帧进行低延时处理,即尽可能减少当前采集到的视频帧和已处理视频帧之间的延迟。许多国内外研究者已经开始展开对低延时视频稳像技术的研究。目前常用的低延时视频稳像算法主要分为两类:2D低延时稳像和3D低延时稳像。2D低延时稳像以基于卡尔曼滤波的视频稳像(A.Litvin,J.Konrad,W.Karl.Probabilistic video stabilization using Kalman filtering andmosaicking.Symposium on Electronic Imaging,Image and Video Communications,2003)为代表,该方法利用特征点提取的方法估计摄像机的运动轨迹表示为仿射矩阵,在此基础上利用卡尔曼滤波去除视频序列中不需要的抖动。卡尔曼滤能够预测未来的状态,具有实时计算的优点,能够保证算法低延时处理。但基于特征点的运动估计方法在视频图像平滑区域较大、噪声严重以及视频拍摄环境较暗等情况下效果不好,从而影响了视频稳像的效果。该方法无法在处理效果和处理时间上达到一个平衡。3D低延时稳像以基于流形的视频稳像(C.Jia and B.L.Evans,“Constrained 3D rotation smoothing via globalmanifold regression for video stabilization,”IEEE Trans.Signal Process.,vol.62,no.13,pp.3293–3304,Jul.2014)为代表,该方法通过读取惯导参数直接获得移动设备的运动轨迹,将其表示为旋转矩阵,并将旋转矩阵整合到黎曼流形中,通过对能量方程求最优解得到稳定的相机运动轨迹。该方法避免了运动估计过程中的大量计算,并且不受视频拍摄内容的影响,对计算速度和稳像效果都有一定的提升。但该算法对旋转矩阵进行全局平滑优化,无法实时的进行计算,算法延时仍较高。
发明内容
本发明的目的是对于现有视频稳像算法延时较高、稳像效果不佳的问题,提出了一种基于惯性导航参数流形优化的低延时视频稳像方法。
本发明的核心思想是将惯导参数表示为刚体变换组成的李群流形,然后通过流形上的卡尔曼滤波对刚体变换序列进行平滑,最后通过投影变换对视频帧进行运动补偿变换,得到稳定的视频。
一种基于惯导参数流形优化的低延时的视频稳像方法,包括以下步骤:
步骤一、获取惯导参数;
惯导参数为移动设备在相机坐标系中绕三个坐标轴的旋转角速度;具体的:惯导参数获取通过利用带有惯导传感器的移动设备在拍摄视频的同时提取;
步骤二、计算刚体变换的旋转矩阵,即原始旋转矩阵;具体为:
步骤2.1将旋转角速度按时间进行积分,得到当前时刻的旋转角度;
绕移动设备x轴旋转的角度为绕移动设备y轴旋转的角度为θ,绕移动设备z轴旋转的角度为ψ;此三个旋转角度分别表示为公式(1)、(2)和(3):
θ=∫ωydt (2)
ψ=∫ωzdt (3)
其中,ωx是绕移动设备x轴的旋转角速度,ωy是绕移动设备y轴的旋转角速度,ωz是绕移动设备z轴的旋转角速度。∫*dt表示对时间进行积分。
步骤2.2根据刚体变换原理,将步骤2.1中的旋转角度θ、ψ带入刚体变换公式得到刚体变换的旋转矩阵R,如下公式(4)所示:
其中,R是一个3×3的旋转矩阵;
步骤三、对步骤二输出的旋转矩阵进行卡尔曼滤波,得到卡尔曼滤波后的旋转矩阵;具体为:
刚体变换的旋转矩阵序列形成一个李群流形,表示为SO(3);对于任意旋转矩阵R∈SO(3),在李群流形中对旋转矩阵R进行卡尔曼滤波;
卡尔曼滤波包括预测和更新两个过程,其中,采用卡尔曼滤波的预测过程表示如公式(5)和公式(6):
P′k=Pk-1+q (6)
其中,是k-1时刻旋转矩阵的估计值,是k时刻旋转矩阵的预测值;Pk-1是k-1时刻协方差的估计值,P′k是k时刻协方差的预测值,q是满足高斯分布的***噪声;
采用卡尔曼滤波的更新过程表示如公式(7)、公式(8)和公式(9):
Kk=Pk'/(Pk'+r) (7)
Pk=(I-Kk)Pk' (9)
其中,Kk是卡尔曼增益,r是满足高斯分布的测量噪声,Zk是k时刻的测量值。对于公式(8),是按照李群流形上测地线对预测值和测量值Zk的插值;
步骤四、将相机坐标系映射到图像坐标系,根据移动设备内参矩阵得到映射关系;
根据相机的小孔成像原理,对于相机坐标系中的一点X,它投影到图像坐标系上的坐标点x如公式(10)所示:
x=KX (10)
其中,x以齐次坐标的形式表示,K为移动设备内参矩阵,通过对移动设备进行标定得到具体形式为公式(11):
其中,fx、fy是表示焦距的参数,x0、y0是主点偏移量、s是倾斜轴;
步骤五、利用步骤二输出的原始旋转矩阵、步骤三输出的滤波后的旋转矩阵和步骤四得到的映射关系进行补偿变换,具体为:
根据得到的移动设备内参矩阵以及平滑前后的旋转矩阵,可以得到平滑前后视频帧图像坐标系中的坐标点之间的映射关系:
其中,是平滑后的视频帧图像坐标,x是平滑前的视频帧图像坐标,即通过拍摄得到的原始图像坐标,和x均以齐次坐标的形式表示,K是移动设备内参矩阵,是平滑后的旋转矩阵,R是平滑前的旋转矩阵;根据平滑前后视频帧图像坐标点之间的映射关系对视频帧图像做补偿变换,即可得到稳定的视频;
至此,从步骤一到步骤五,完成了一种基于惯性导航参数流形优化的低延时的视频稳像方法。
有益效果
本发明一种基于惯性导航参数流形优化的低延时的视频稳像方法,与现有技术相比,具有如下有益效果:
(1)本发明所述方法直接读取移动设备的惯导参数,并且对流形计算和卡尔曼滤波进行结合,能够提供更低的延时;
(2)本发明所述方法利用惯导参数提供了更好的稳像效果。
附图说明
图1是本发明一种基于惯性导航参数在流形上优化的低延时的视频稳像方法的流程图。
具体实施方式
下面结合附图1对本发明方法的实施方式做详细说明。
一种基于惯导参数流形优化的低延时的视频稳像方法,本发明的具体实现步骤如下:
步骤A、获取惯导参数;
在本实施例中,利用带有惯导传感器移动设备iphone的数据接口,在拍摄视频的同时提取惯导参数,该参数为移动设备在相机坐标系中绕三个坐标轴旋转角速度。此处视频拍时帧率设置为30fp,惯导参数的采样频率为1秒30次;利用该参数来对移动的设备的运动进行建模能够获得更加准确的运动轨迹,对视频稳像结果有一定的提升,并且减小了计算量,从而降低了算法的延时。
步骤B、计算刚体变换的旋转矩阵,具体为:
步骤B.a将旋转角速度按时间进行积分,得到当前时刻的旋转角度;
绕移动设备x轴旋转的角度为绕移动设备y轴旋转的角度为θ,绕移动设备z轴旋转的角度为ψ;此三个旋转角度分别表示为公式(12)、(13)和(14):
θ=∫ωydt (13)
ψ=∫ωzdt (14)
其中,ωx是绕移动设备x轴的旋转角速度,ωy是绕移动设备y轴的旋转角速度,ωz是绕移动设备z轴的旋转角速度。∫*dt表示对时间进行积分。此处t取值同惯导参数采样间隔,为1/30秒。
步骤B.b根据刚体变换原理,将步骤B.a中的旋转角度θ、ψ带入刚体变换公式得到刚体变换的旋转矩阵R,如下公式(15)所示:
其中R是一个3×3的旋转矩阵;
步骤C、对步骤B输出的旋转矩阵进行卡尔曼滤波,具体为:
刚体变换的旋转矩阵序列形成一个李群流,表示为SO(3);对于任意旋转矩阵R∈SO(3),在李群流形中对旋转矩阵R进行卡尔曼滤波。卡尔曼滤波包括预测和更新两个过程,其中采用卡尔曼滤波的预测过程表示如公式(16)和公式(17):
P′k=Pk-1+q (17)
其中,是k-1时刻旋转矩阵的估计值,是k时刻旋转矩阵的预测值;Pk-1是k-1时刻协方差的估计值,P′k是k时刻协方差的预测值,q是满足高斯分布的***噪声;在本实施例中,迭代的初始阶段将P0设置为10,q设置为e-4,该值的设定保证卡尔曼滤波在预测过程中能够适当保留前一时刻的运动趋势。
采用卡尔曼滤波的更新过程表示如公式(18)、公式(19)和公式(20):
Kk=P′k/(P′k+r) (18)
Pk=(I-Kk)P′k (20)
其中,Kk是卡尔曼增益,r是满足高斯分布的测量噪声,Zk是k时刻的测量值。对于公式(19),是按照李群流形上测地线对预测值和测量值Zk的插值;在本实施例中,将r设置为e-1,该值的设定保证卡尔曼滤波在更新过程中能够适当的保留测量值的权重。
至此,卡尔曼滤波通过迭代在预测值和测量值中自适应的调整权重,保证平滑后的旋转矩阵能够改善视频稳像的效果;
步骤D、将相机坐标系映射到图像坐标系,根据移动设备内参矩阵得到映射关系;
根据相机的小孔成像原理,对于相机坐标系中的一点X,它投影到图像坐标系上的坐标点x如公式(21)所示:
x=KX (21)
其中x为齐次坐标,K为移动设备内参矩阵,通过对移动设备进行标定得到,具体形式为公式(22):
其中,fx、fy是表示焦距的参数,x0、y0是主点偏移量,s是倾斜轴。在本实施例中x0的取值为视频帧图像宽度的二分之一,为360,y0的取值为视频帧图像高度的二分之一,为240,s是倾斜轴,取值为1。
通过将相机坐标系映射到图像坐标系,我们将相机坐标系三维空间中移动设备的运动轨迹投影为图像坐标系二维空间中像素点的运动轨迹,为后续对图像进行补偿变换奠定了基础;
步骤E、利用步骤B输出的原始旋转矩阵、步骤C输出的滤波后的旋转矩阵和步骤D得到的映射关系进行补偿变换,具体为:
根据得到的移动设备内参矩阵以及平滑前后的旋转矩阵,可以得到平滑前后视频帧图像坐标系中的坐标点之间的映射关系:
其中,是平滑后的视频帧图像坐标,x是平滑前的视频帧图像坐标,即通过拍摄得到的原始图像坐标,和x均以齐次坐标的形式表示,K是移动设备内参矩阵,是平滑后的旋转矩阵,R是平滑前的旋转矩阵。根据平滑前后视频帧图像坐标点之间的映射关系对视频帧图像做补偿变换,即可得到稳定的视频。
为了说明本发明的内容及实施方法,本说明书给出了一个具体实施例。在实施例中引入细节的目的不是限制权利要求书的范围,而是帮助理解本发明所述方法。本领域的技术人员应理解:在不脱离本发明及其所附权利要求的精神和范围内,对最佳实施例步骤的各种修改、变化或替换都是可能的。因此,本发明不应局限于最佳实施例及附图所公开的内容。
Claims (5)
1.一种基于惯导参数流形优化的低延时视频稳像方法,其特征在于:核心思想是将惯导参数表示为刚体变换组成的李群流形,然后通过流形上的卡尔曼滤波对刚体变换序列进行平滑,最后通过投影变换对视频帧进行运动补偿变换,得到稳定的视频,包括以下步骤:
步骤一、获取惯导参数;
其中,惯导参数为移动设备在相机坐标系中绕三个坐标轴的旋转角速度;
步骤二、计算刚体变换的旋转矩阵,即原始旋转矩阵;具体为:
步骤2.1将旋转角速度按时间进行积分,得到当前时刻的旋转角度;
绕移动设备x轴旋转的角度为φ,绕移动设备y轴旋转的角度为θ,绕移动设备z轴旋转的角度为ψ;此三个旋转角度分别表示为公式(1)、(2)和(3):
θ=∫ωydt (2)
ψ=∫ωzdt (3)
其中,ωx是绕移动设备x轴的旋转角速度,ωy是绕移动设备y轴的旋转角速度,ωz是绕移动设备z轴的旋转角速度;∫*dt表示对时间进行积分;
步骤2.2根据刚体变换原理,将步骤2.1中的旋转角度φ、θ、ψ带入刚体变换公式得到刚体变换的旋转矩阵R,如下公式(4)所示:
其中,R是一个3×3的旋转矩阵;
步骤三、对步骤二输出的旋转矩阵进行卡尔曼滤波,得到卡尔曼滤波后的旋转矩阵;
步骤四、将相机坐标系映射到图像坐标系,得到映射关系;
步骤五、利用步骤二输出的原始旋转矩阵、步骤三输出的卡尔曼滤波后的旋转矩阵和步骤四得到的映射关系进行补偿变换;
至此,从步骤一到步骤五,完成了一种基于惯性导航参数流形优化的低延时的视频稳像方法。
2.根据权利要求1所述的一种基于惯导参数流形优化的低延时视频稳像方法,其特征在于:步骤一中的惯导参数获取通过利用带有惯导传感器的移动设备在拍摄视频的同时提取。
3.根据权利要求1所述的一种基于惯导参数流形优化的低延时视频稳像方法,其特征在于:步骤三,具体为:刚体变换的旋转矩阵序列形成一个李群流形示为SO(3);对于任意旋转矩阵R∈SO(3),在李群流形中对旋转矩阵R进行卡尔曼滤波;
卡尔曼滤波包括预测和更新两个过程,其中,采用卡尔曼滤波的预测过程表示如公式(5)和公式(6):
P′k=Pk-1+q (6)
其中,是k-1时刻旋转矩阵的估计值,是k时刻旋转矩阵的预测值;Pk-1是k-1时刻协方差的估计值,P′k是k时刻协方差的预测值,q是满足高斯分布的***噪声;
采用卡尔曼滤波的更新过程表示如公式(7)、公式(8)和公式(9):
Kk=P′k/(P′k+r) (7)
Pk=(I-Kk)P′k (9)
其中,Kk是卡尔曼增益,r是满足高斯分布的测量噪声,Zk是k时刻的测量值;对于公式(8),是按照李群流形上测地线对预测值和测量值Zk的插值。
4.根据权利要求1所述的一种基于惯导参数流形优化的低延时视频稳像方法,其特征在于:步骤四,具体为:根据相机的小孔成像原理,对于相机坐标系中的一点X,它投影到图像坐标系上的坐标点x如公式(10)所示:
x=KX (10)
其中,x以齐次坐标的形式表示,K为移动设备内参矩阵,通过对移动设备进行标定得到,具体形式为公式(11):
其中,fx、fy是表示焦距的参数,x0、y0是主点偏移量、s是倾斜轴。
5.根据权利要求1所述的一种基于惯导参数流形优化的低延时视频稳像方法,其特征在于:步骤五,具体为:
根据得到的移动设备内参矩阵以及平滑前后的旋转矩阵,可以得到平滑前后视频帧图像坐标系中的坐标点之间的映射关系:
其中,是平滑后的视频帧图像坐标,x是平滑前的视频帧图像坐标,即通过拍摄得到的原始图像坐标,和x均以齐次坐标的形式表示,K是移动设备内参矩阵,是平滑后的旋转矩阵,R是平滑前的旋转矩阵;根据平滑前后视频帧图像坐标点之间的映射关系对视频帧图像做补偿变换,即可得到稳定的视频。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810137388.8A CN108307118B (zh) | 2018-02-10 | 2018-02-10 | 一种基于惯导参数流形优化的低延时视频稳像方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810137388.8A CN108307118B (zh) | 2018-02-10 | 2018-02-10 | 一种基于惯导参数流形优化的低延时视频稳像方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108307118A true CN108307118A (zh) | 2018-07-20 |
CN108307118B CN108307118B (zh) | 2020-07-07 |
Family
ID=62865180
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810137388.8A Active CN108307118B (zh) | 2018-02-10 | 2018-02-10 | 一种基于惯导参数流形优化的低延时视频稳像方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108307118B (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110326287A (zh) * | 2019-05-14 | 2019-10-11 | 深圳市大疆创新科技有限公司 | 拍摄方法和装置 |
CN110602377A (zh) * | 2019-03-18 | 2019-12-20 | 上海立可芯半导体科技有限公司 | 一种视频稳像方法及装置 |
CN110677578A (zh) * | 2019-08-14 | 2020-01-10 | 北京理工大学 | 基于仿生眼平台的混合稳像方法和装置 |
CN111372000A (zh) * | 2020-03-17 | 2020-07-03 | Oppo广东移动通信有限公司 | 视频防抖方法和装置、电子设备及计算机可读存储介质 |
CN112396639A (zh) * | 2019-08-19 | 2021-02-23 | 虹软科技股份有限公司 | 图像对齐方法 |
CN114040128A (zh) * | 2021-11-24 | 2022-02-11 | 视辰信息科技(上海)有限公司 | 时间戳延时标定方法及***、设备和计算机可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040095374A1 (en) * | 2002-11-14 | 2004-05-20 | Nebojsa Jojic | System and method for automatically learning flexible sprites in video layers |
CN102663718A (zh) * | 2012-03-19 | 2012-09-12 | 清华大学 | 一种全局不一致图像去模糊的方法及*** |
CN106027852A (zh) * | 2016-06-24 | 2016-10-12 | 西北工业大学 | 一种用于微纳卫星的视频稳像方法 |
CN106204458A (zh) * | 2016-07-12 | 2016-12-07 | 北京理工大学 | 一种基于运动几何量约束的视频稳像裁剪控制方法 |
-
2018
- 2018-02-10 CN CN201810137388.8A patent/CN108307118B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040095374A1 (en) * | 2002-11-14 | 2004-05-20 | Nebojsa Jojic | System and method for automatically learning flexible sprites in video layers |
CN102663718A (zh) * | 2012-03-19 | 2012-09-12 | 清华大学 | 一种全局不一致图像去模糊的方法及*** |
CN106027852A (zh) * | 2016-06-24 | 2016-10-12 | 西北工业大学 | 一种用于微纳卫星的视频稳像方法 |
CN106204458A (zh) * | 2016-07-12 | 2016-12-07 | 北京理工大学 | 一种基于运动几何量约束的视频稳像裁剪控制方法 |
Non-Patent Citations (3)
Title |
---|
LEI ZHANG 等: "A GLOBAL APPROACH TO FAST VIDEO STABILIZATION", 《IEEE TRANSACTIONS ON CIRCUITS AND SYSTEM FOR VIDEO TECHNOLOGY》 * |
LEI ZHANG 等: "GEODESIC VIDEO STABILIZATION IN TRANSFORMATION SPACE", 《IEEE TRANSACTIONS ON IMAGE PROCESSING》 * |
陈晓权 等: "基于ARM的视频流实时稳像增强算法", 《***仿真学报》 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110602377A (zh) * | 2019-03-18 | 2019-12-20 | 上海立可芯半导体科技有限公司 | 一种视频稳像方法及装置 |
CN110602377B (zh) * | 2019-03-18 | 2021-04-23 | 上海立可芯半导体科技有限公司 | 一种视频稳像方法及装置 |
CN110326287A (zh) * | 2019-05-14 | 2019-10-11 | 深圳市大疆创新科技有限公司 | 拍摄方法和装置 |
CN110677578A (zh) * | 2019-08-14 | 2020-01-10 | 北京理工大学 | 基于仿生眼平台的混合稳像方法和装置 |
CN112396639A (zh) * | 2019-08-19 | 2021-02-23 | 虹软科技股份有限公司 | 图像对齐方法 |
CN111372000A (zh) * | 2020-03-17 | 2020-07-03 | Oppo广东移动通信有限公司 | 视频防抖方法和装置、电子设备及计算机可读存储介质 |
CN111372000B (zh) * | 2020-03-17 | 2021-08-17 | Oppo广东移动通信有限公司 | 视频防抖方法和装置、电子设备及计算机可读存储介质 |
CN114040128A (zh) * | 2021-11-24 | 2022-02-11 | 视辰信息科技(上海)有限公司 | 时间戳延时标定方法及***、设备和计算机可读存储介质 |
CN114040128B (zh) * | 2021-11-24 | 2024-03-01 | 视辰信息科技(上海)有限公司 | 时间戳延时标定方法及***、设备和计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN108307118B (zh) | 2020-07-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108307118A (zh) | 一种基于惯导参数流形优化的低延时视频稳像方法 | |
CN108848304B (zh) | 一种全景视频的目标跟踪方法、装置和全景相机 | |
US9479709B2 (en) | Method and apparatus for long term image exposure with image stabilization on a mobile device | |
US20160178728A1 (en) | Indoor Positioning Terminal, Network, System and Method | |
US20200236283A1 (en) | Method, system and apparatus for stabilising frames of a captured video sequence | |
CN108107571B (zh) | 图像处理装置及方法及非暂时性计算机可读记录介质 | |
CN103873758B (zh) | 全景图实时生成的方法、装置及设备 | |
CN105282421B (zh) | 一种去雾图像获取方法、装置及终端 | |
CN107749987B (zh) | 一种基于块运动估计的数字视频稳像方法 | |
CN113132612B (zh) | 一种图像稳像处理方法、终端拍摄方法、介质及*** | |
CN109492506A (zh) | 图像处理方法、装置和*** | |
CN109561254B (zh) | 一种全景视频防抖的方法、装置及便携式终端 | |
CN108366201B (zh) | 一种基于陀螺仪的电子防抖方法 | |
CN106412441B (zh) | 一种视频防抖控制方法以及终端 | |
CN113875220B (zh) | 拍摄防抖方法、装置、终端及存储介质 | |
CN104869310A (zh) | 基于移动设备gpu和角速度传感器的视频拍摄防抖方法 | |
CN105100546A (zh) | 运动估计方法及装置 | |
CN113542600B (zh) | 一种图像生成方法、装置、芯片、终端和存储介质 | |
CN112204946A (zh) | 数据处理方法、装置、可移动平台及计算机可读存储介质 | |
CN114584785A (zh) | 视频图像的实时稳像方法及装置 | |
CN109688327B (zh) | 一种全景视频防抖的方法、装置及便携式终端 | |
WO2019119597A1 (zh) | 移动终端与镜头组件配合实现平面拍摄、全景拍摄的方法和镜头组件 | |
CN115546043B (zh) | 视频处理方法及其相关设备 | |
CN109561253B (zh) | 一种全景视频防抖的方法、装置、便携式终端及存储介质 | |
WO2020181510A1 (zh) | 一种图像数据处理方法、装置及*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |