CN102110292A - 一种虚拟体育中的变焦镜头标定方法及装置 - Google Patents
一种虚拟体育中的变焦镜头标定方法及装置 Download PDFInfo
- Publication number
- CN102110292A CN102110292A CN2009102439328A CN200910243932A CN102110292A CN 102110292 A CN102110292 A CN 102110292A CN 2009102439328 A CN2009102439328 A CN 2009102439328A CN 200910243932 A CN200910243932 A CN 200910243932A CN 102110292 A CN102110292 A CN 102110292A
- Authority
- CN
- China
- Prior art keywords
- camera
- mrow
- msub
- image
- math
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000003287 optical effect Effects 0.000 claims abstract description 28
- 238000004364 calculation method Methods 0.000 claims description 8
- 238000004422 calculation algorithm Methods 0.000 claims description 7
- 238000005457 optimization Methods 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 2
- 125000004122 cyclic group Chemical group 0.000 claims 1
- 239000003550 marker Substances 0.000 abstract description 3
- 239000011159 matrix material Substances 0.000 description 7
- 238000000354 decomposition reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 230000004931 aggregating effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000011426 transformation method Methods 0.000 description 1
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种虚拟体育中的变焦镜头标定方法,包括:标定摄像机最短焦时的内参数;获取固定位置的摄像机通过变焦对户外场景采集一组变焦图像;从第一幅图像开始,循环执行以下步骤直至最后一副图像;步骤S1、选取相邻的两幅图像;步骤S2、对所述两幅图像分别提取多个SIFT特征点;步骤S3、将所述SIFT特征点进行匹配,建立特征点集步骤;S4、依据匹配特征点集合,以及,前一幅图像的摄像机参数,计算后一幅图像对应的摄像机最短焦内参数和光心的旋转角度;步骤S5、将光心旋转角度都处理为相对于前一幅图的旋转,即获得后一幅图像的摄像机变焦参数;步骤S6、令i=i+1,返回步骤S1。本发明无需采用标志物,可以有效提高实施的便利性。
Description
技术领域
本发明涉及电视节目制作的技术领域,特别是涉及一种虚拟体育中的变焦镜头标定方法及一种虚拟体育中的变焦镜头标定装置。
背景技术
摄像机标定的目的是从摄像机获取的图像信息出发,计算三维空间中物体的几何信息,并由此重建和识别物体。而空间物体表面某点的三维几何位置与其在图像中对应点之间的相互关系,是由摄像机成像的几何模型决定的,这些几何模型参数就是标定参数。具体而言,标定参数包括外参数和内参数,其中,外参数包括摄像机的位置、姿态等几何信息,内参数包括摄像机的焦距,主点、以及镜头变形参数等光学参数,用外参数和内参数来建立空间中的任意点和其在图像上的成像点之间的对应关系,这个过程就是摄像机标定的过程。通常,空间中的任意点和其在图像上的成像点之间的对应关系用小孔成像模型来描述。
传统的摄像机标定是在一定的摄像机模型下,基于特定的实验条件,如形状、尺寸已知的标定物,经过对其进行图像处理,利用一系列数学变换和计算方法,求取摄像机模型的外参数和内参数。例如,现在标定变焦镜头,通常采用在墙上贴一个标志板,然后对着标志板变焦采图,利用标志板的坐标已知的条件,计算出摄像机镜头的变焦参数。这种方法,从实施上来说会比较麻烦,如果在户外嘈杂的环境中,利用图像分析的方法寻找标志板的角点还有可能失败。
发明内容
本发明所要解决的技术问题是提供一种虚拟体育中的变焦镜头标定方法,无需采用标志物,以提高实施的便利性。
为了解决上述技术问题,本发明实施例公开了一种虚拟体育中的变焦镜头标定方法,包括:
标定摄像机最短焦时的内参数K1;
获取固定位置的摄像机通过变焦对户外场景采集一组变焦图像I;
从第一幅图像开始,循环执行以下步骤直至最后一副图像;
步骤S1、选取相邻的两幅图像Ii-1和Ii;
步骤S2、对所述两幅图像分别提取多个SIFT特征点xi-1以及xi;
步骤S3、将所述SIFT特征点进行匹配,建立特征点集合
步骤S4、依据匹配特征点集合 以及,前一幅图像Ii-1的摄像机参数Ki-1,计算后一幅图像Ii对应的摄像机最短焦内参数Ki和光心的旋转角度dR(α,β);
步骤S5、将光心旋转角度都处理为相对于前一幅图的旋转,即获得后一幅图像的摄像机变焦参数为:
dRi=dRdRi-1
且dR1=I;
步骤S6、令i=i+1,返回步骤S1。
优选的,所述摄像机最短焦时的内参数采用张正友标定方法获得。
优选的,所述特征点匹配为,将相邻两幅图像中描述同一个特征的点对应起来。
优选的,在步骤S5之前,还包括:
采用LM算法对所述变焦参数进行优化。
本发明实施例还公开了一种虚拟体育中的变焦镜头标定装置,包括:
内参数标定单元,用于标定摄像机最短焦时的内参数K1;
变焦图像获取单元,用于获取固定位置的摄像机通过变焦对户外场景采集一组变焦图像I;
循环控制单元,用于控制从第一幅图像开始,针对相邻两幅图像依次调用如下子单元,直至最后一副图像;
相邻图像确定子单元,用于选取相邻的两幅图像Ii-1和Ii,
特征点提取子单元,用于对所述两幅图像分别提取多个SIFT特征点xi-1以及xi;
特征点匹配子单元,用于将所述SIFT特征点进行匹配,建立特征点集合
计算子单元,用于依据匹配特征点集合 以及,前一幅图像Ii-1的摄像机参数Ki-1,计算后一幅图像Ii对应的摄像机最短焦内参数Ki和光心的旋转角度dR(α,β);
光心旋转子单元,用于将光心旋转角度都处理为相对于前一幅图的旋转,即获得后一幅图像的摄像机变焦参数为:
dRi=dRdRi-1
且dR1=I;
循环点定位子单元,用于将i=i+1,返回所述相邻图像确定子单元。
优选的,所述摄像机最短焦时的内参数采用张正友标定方法获得。
优选的,所述循环控制单元还用于在光心旋转子单元之前调用:
优化子单元,用于采用LM算法对所述变焦参数进行优化。
与现有技术相比,本发明具有以下优点:
本发明不需要任何标志物,只需采用摄像机对户外自然场景拍摄一组变焦图像,然后对该组变焦图像两两提取特征点以进行匹配,基于匹配的特征点及已知的摄像机最短焦内参数就可以得到该镜头的变焦参数。这种方法可以以提高实施的便利性,十分简便快捷。。
附图说明
图1是本发明的一种虚拟体育中的变焦镜头标定方法实施例的步骤流程图;
图2是本发明的一种虚拟体育中的变焦镜头标定装置实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参考图1,示出了本发明的一种虚拟体育中的变焦镜头标定方法实施例的步骤流程图,具体可以包括以下步骤:
步骤101、标定摄像机最短焦时的内参数K1;
在实际中,所述摄像机最短焦时的内参数可以采用张正友提出的利用多幅平面模板标定摄像机所有内外参数的方法——平面标定法进行标定。在该方法中,摄像机内参数矩阵为:
其中fx=f/dX,fy=f/dY,分别称为x轴和y轴上的归一化焦距;f是相机的焦距,dX和dY分别表示u轴和v轴上单位像素的尺寸大小。u0和v0则表示的是光学中心,即摄像机光轴与图像平面的交点,通常位于图像中心处,故其值常取分辨率的一半。
当然,上述标定内参数的方法仅仅用作示例,本领域技术人员依据实际情况采用其它内参数标定方法都是可行的,本发明对此无需加以限制。
步骤102、获取固定位置的摄像机通过变焦对户外场景采集一组变焦图像I;
例如,已知摄像机的初始内参数矩阵K1,此时拍摄到的图像为I1。将世界坐标系设在摄像机初始光心的位置上,那么摄像机此时的旋转和平移都是0。固定摄像机,变焦之后,摄像机的光心将产生一个微小的旋转dR,此时摄像机的内参数矩阵为K2,拍摄到的图像为I2。
步骤103、从第一幅图像开始(即初始i=2),循环执行以下步骤直至最后一副图像;
步骤S1、选取相邻的两幅图像Ii-1和Ii;
步骤S2、对所述两幅图像分别提取多个SIFT特征点xi-1以及xi;
由于图像中的内容不是标志板那样简单的物体,而是户外很复杂的自然场景,所以提取的特征点不再是现有技术中简单的角点。本发明中采用的是SIFT特征点。
步骤S3、将所述SIFT特征点进行匹配,建立特征点集合
步骤S4、依据匹配特征点集合 以及,前一幅图像Ii-1的摄像机参数Ki-1,计算后一幅图像Ii对应的摄像机最短焦内参数Ki和光心的旋转角度dR(α,β);
因为本发明是用相邻的两幅图像计算变焦参数,所以光心的偏移dR总是相对于前一幅图像的,因此还需要通过步骤S5整理一下。
步骤S5、将光心旋转角度都处理为相对于前一幅图的旋转,即获得后一幅图像的摄像机变焦参数为:
dRi=dRdRi-1
且dR1=I;
步骤S6、令i=i+1,返回步骤S1。
然后得到第三幅图像对应的摄像机变焦参数,以此类推,直到计算完最后一幅图像的摄像机变焦参数。
其中,SIFT特征点是用一个128维的特征向量来描述一个点的特征,它具有尺度、光照、旋转等不变性,对同一个特征有很强的稳定性,而对不同的特征有很大区分度,因此很容易准确地匹配起来。
SIFT特征点的匹配主要就是其特征向量的匹配,在本发明实施列中,可以通过将相邻两幅图像中描述同一个特征的点对应起来,建立一个特征点对应的集合 以进行匹配。在具体实现中,还可以采用PCA算法,也可以用k-d Tree的办法搜索,本发明对此无需加以限制。
在虚拟体育中,场地距离摄像机的距离往往比较远,其距离远大于摄像机变焦时的光心移动距离,此时光心的平移对摄像机外参数矩阵的影响微乎其微,可以忽略。因此本发明实施例只考虑变焦时光心旋转的影响。
已知摄像机的初始内参数矩阵K1,此时拍摄到的图为I1。像将世界坐标系设在摄像机初始光心的位置上,那么摄像机此时的旋转和平移都是0。固定摄像机,变焦之后,摄像机的光心将产生一个微小的旋转dR,此时摄像机的内参数矩阵为K2,拍摄到的图像为I2。那么在世界坐标系下的同一个三维点X,在这两幅图中分别被投影成:
x1=K1X (1)
x2=K2dRX (2)
所以有:
令:
则有:
x2=Hx1 (5)
因为图像点x1,x2(提取出来的SIFT点)为已知,所以如果匹配集 中对应的点数大于或等于4个,那么H就可以从(5)式简单地计算出来,于是(4)式可以得到:
K2dR=HK1 (6)
将(6)式右边矩阵相乘的结果作QR分解,就可以得到K2,dR。
上面分解得到的摄像机参数是不能直接用的,误差比较大,只能作为初值。因而在本发明的一种优选实施例中,还可以采用LM算法对摄像机参数作优化,得到最终结果。
优化的目标函数是:
其中,
dR的参数化由Givens旋转给出:
dR=Ry(-α)Rx(-β)
K2中参数(fx2,fy2)的初值由QR分解的结果直接得到,而(α,β)的初值可以直接选为0。当迭代收敛后,得到的(fx2,fy2,α,β)就是第二幅图I2的摄像机变焦参数。
需要说明的是,对于前述的方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。
参考图2,示出了本发明的一种虚拟体育中的变焦镜头标定装置实施例的结构框图,具体可以包括以下单元:
内参数标定单元201,用于标定摄像机最短焦时的内参数K1;
变焦图像获取单元202,用于获取固定位置的摄像机通过变焦对户外场景采集一组变焦图像I;
循环控制单元203,用于控制从第一幅图像开始,针对相邻两幅图像依次调用如下子单元,直至最后一副图像;
相邻图像确定子单元31,用于选取相邻的两幅图像Ii-1和Ii,
特征点提取子单元32,用于对所述两幅图像分别提取多个SIFT特征点xi-1以及xi;
特征点匹配子单元33,用于将所述SIFT特征点进行匹配,建立特征点集合
计算子单元34,用于依据匹配特征点集合 以及,前一幅图像Ii-1的摄像机参数Ki-1,计算后一幅图像Ii对应的摄像机最短焦内参数Ki和光心的旋转角度dR(α,β);
光心旋转子单元35,用于将光心旋转角度都处理为相对于前一幅图的旋转,即获得后一幅图像的摄像机变焦参数为:
dRi=dRdRi-1
且dR1=I;
循环点定位子单元36,用于将i=i+1,返回所述相邻图像确定子单元。
在具体实现中,所述摄像机最短焦时的内参数可以采用张正友标定方法获得。
为获得更为准确的计算结果,在本发明的一种优选实施例中,所述循环控制单元还用于在调用光心旋转子单元35之前调用如下子单元:
优化子单元,用于采用LM算法对所述变焦参数进行优化。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上对本发明所提供的一种虚拟体育中的变焦镜头标定方法及一种虚拟体育中的变焦镜头标定装置进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (7)
1.一种虚拟体育中的变焦镜头标定方法,其特征在于,包括:标定摄像机最短焦时的内参数K1;
获取固定位置的摄像机通过变焦对户外场景采集一组变焦图像I;
从第一幅图像开始,循环执行以下步骤直至最后一副图像;
步骤S1、选取相邻的两幅图像Ii-1和Ii;
步骤S2、对所述两幅图像分别提取多个SIFT特征点xi-1以及xi;
步骤S3、将所述SIFT特征点进行匹配,建立特征点集合
步骤S4、依据匹配特征点集合 以及,前一幅图像Ii-1的摄像机参数Ki-1,计算后一幅图像Ii对应的摄像机最短焦内参数Ki和光心的旋转角度dR(α,β);
步骤S5、将光心旋转角度都处理为相对于前一幅图的旋转,即获得后一幅图像的摄像机变焦参数为:
dRi=dRdRi-1
且dR1=I;
步骤S6、令i=i+1,返回步骤S1。
2.如权利要求1所述的方法,其特征在于,所述摄像机最短焦时的内参数采用张正友标定方法获得。
3.如权利要求2所述的方法,其特征在于,所述特征点匹配为,将相邻两幅图像中描述同一个特征的点对应起来。
4.如权利要求3所述的方法,其特征在于,在步骤S5之前,还包括:
采用LM算法对所述变焦参数进行优化。
5.一种虚拟体育中的变焦镜头标定装置,其特征在于,包括:
内参数标定单元,用于标定摄像机最短焦时的内参数K1;
变焦图像获取单元,用于获取固定位置的摄像机通过变焦对户外场景采集一组变焦图像I;
循环控制单元,用于控制从第一幅图像开始,针对相邻两幅图像依次调用如下子单元,直至最后一副图像;
相邻图像确定子单元,用于选取相邻的两幅图像Ii-1和Ii,
特征点提取子单元,用于对所述两幅图像分别提取多个SIFT特征点xi-1以及xi;
特征点匹配子单元,用于将所述SIFT特征点进行匹配,建立特征点集合
计算子单元,用于依据匹配特征点集合 以及,前一幅图像Ii-1的摄像机参数Ki-1,计算后一幅图像Ii对应的摄像机最短焦内参数Ki和光心的旋转角度dR(α,β);
光心旋转子单元,用于将光心旋转角度都处理为相对于前一幅图的旋转,即获得后一幅图像的摄像机变焦参数为:
dRi=dRdRi-1
且dR1=I;
循环点定位子单元,用于将i=i+1,返回所述相邻图像确定子单元。
6.如权利要求5所述的装置,其特征在于,所述摄像机最短焦时的内参数采用张正友标定方法获得。
7.如权利要求6所述的装置,其特征在于,所述循环控制单元还用于在光心旋转子单元之前调用:优化子单元,用于采用LM算法对所述变焦参数进行优化。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200910243932.8A CN102110292B (zh) | 2009-12-25 | 2009-12-25 | 一种虚拟体育中的变焦镜头标定方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200910243932.8A CN102110292B (zh) | 2009-12-25 | 2009-12-25 | 一种虚拟体育中的变焦镜头标定方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102110292A true CN102110292A (zh) | 2011-06-29 |
CN102110292B CN102110292B (zh) | 2015-02-18 |
Family
ID=44174440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200910243932.8A Expired - Fee Related CN102110292B (zh) | 2009-12-25 | 2009-12-25 | 一种虚拟体育中的变焦镜头标定方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102110292B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102737371A (zh) * | 2011-08-29 | 2012-10-17 | 新奥特(北京)视频技术有限公司 | 一种摄像机变焦曲线的标定方法和装置 |
WO2015085779A1 (en) * | 2013-12-10 | 2015-06-18 | Tsinghua University | Method and system for calibrating surveillance cameras |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020167537A1 (en) * | 2001-05-11 | 2002-11-14 | Miroslav Trajkovic | Motion-based tracking with pan-tilt-zoom camera |
CN101447073A (zh) * | 2007-11-26 | 2009-06-03 | 新奥特(北京)视频技术有限公司 | 变焦镜头标定方法 |
-
2009
- 2009-12-25 CN CN200910243932.8A patent/CN102110292B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020167537A1 (en) * | 2001-05-11 | 2002-11-14 | Miroslav Trajkovic | Motion-based tracking with pan-tilt-zoom camera |
CN101447073A (zh) * | 2007-11-26 | 2009-06-03 | 新奥特(北京)视频技术有限公司 | 变焦镜头标定方法 |
Non-Patent Citations (1)
Title |
---|
张小苗等: "单目变焦摄像机自运动的标定测量法", 《计算机工程》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102737371A (zh) * | 2011-08-29 | 2012-10-17 | 新奥特(北京)视频技术有限公司 | 一种摄像机变焦曲线的标定方法和装置 |
CN102737371B (zh) * | 2011-08-29 | 2017-02-01 | 新奥特(北京)视频技术有限公司 | 一种摄像机变焦曲线的标定方法和装置 |
WO2015085779A1 (en) * | 2013-12-10 | 2015-06-18 | Tsinghua University | Method and system for calibrating surveillance cameras |
Also Published As
Publication number | Publication date |
---|---|
CN102110292B (zh) | 2015-02-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021043213A1 (zh) | 标定方法、装置、航拍设备和存储介质 | |
CN109840884B (zh) | 一种图像拼接方法、装置及电子设备 | |
JPWO2018235163A1 (ja) | キャリブレーション装置、キャリブレーション用チャート、チャートパターン生成装置、およびキャリブレーション方法 | |
EP2859528A1 (en) | A multi-frame image calibrator | |
Mistry et al. | Image stitching using Harris feature detection | |
KR20180105875A (ko) | 단일 영상을 이용한 카메라 캘리브레이션 방법 및 이를 위한 장치 | |
US8531505B2 (en) | Imaging parameter acquisition apparatus, imaging parameter acquisition method and storage medium | |
CN106570907B (zh) | 一种相机标定方法及装置 | |
JP6515039B2 (ja) | 連続的な撮影画像に映り込む平面物体の法線ベクトルを算出するプログラム、装置及び方法 | |
CN113205447A (zh) | 用于车道线识别的道路图片标注方法和装置 | |
CN112446917B (zh) | 一种姿态确定方法及装置 | |
KR20240089161A (ko) | 촬영 측정 방법, 장치, 기기 및 저장 매체 | |
JP2019533232A (ja) | パターン検出 | |
EP2648157A1 (en) | Method and device for transforming an image | |
CN115345942A (zh) | 空间标定方法、装置、计算机设备和存储介质 | |
CN112950528A (zh) | 证件姿态确定方法、模型训练方法、装置、服务器及介质 | |
CN114463437A (zh) | 一种摄像机标定方法、装置、设备及计算机可读介质 | |
CN102110292B (zh) | 一种虚拟体育中的变焦镜头标定方法及装置 | |
KR101598399B1 (ko) | 로드뷰 사진이미지의 좌표정보를 이용한 자동 이미지 합성 시스템 | |
WO2019058487A1 (ja) | 3次元復元画像処理装置、3次元復元画像処理方法及び3次元復元画像処理プログラムを記憶したコンピュータ読み取り可能な記憶媒体 | |
CN102110291B (zh) | 一种变焦镜头的标定方法及装置 | |
KR101673144B1 (ko) | 부분 선형화 기반의 3차원 영상 정합 방법 | |
CN111292380A (zh) | 图像处理方法及装置 | |
JP2005031044A (ja) | 三次元誤差測定装置 | |
Georgiev et al. | A fast and accurate re-calibration technique for misaligned stereo cameras |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150218 Termination date: 20161225 |
|
CF01 | Termination of patent right due to non-payment of annual fee |