CN101814181A - 一种鱼眼图像复原的展开方法 - Google Patents

一种鱼眼图像复原的展开方法 Download PDF

Info

Publication number
CN101814181A
CN101814181A CN 201010125523 CN201010125523A CN101814181A CN 101814181 A CN101814181 A CN 101814181A CN 201010125523 CN201010125523 CN 201010125523 CN 201010125523 A CN201010125523 A CN 201010125523A CN 101814181 A CN101814181 A CN 101814181A
Authority
CN
China
Prior art keywords
image
fish eye
coordinate
pixel
unfolded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201010125523
Other languages
English (en)
Other versions
CN101814181B (zh
Inventor
曹作良
刘庆杰
王颖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University of Technology
Original Assignee
Tianjin University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University of Technology filed Critical Tianjin University of Technology
Priority to CN2010101255230A priority Critical patent/CN101814181B/zh
Publication of CN101814181A publication Critical patent/CN101814181A/zh
Application granted granted Critical
Publication of CN101814181B publication Critical patent/CN101814181B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)

Abstract

一种鱼眼图像复原的展开方法。涉及基于球面模型的等距投影原理的鱼眼图像的复原与校正。该方法包括:建立鱼眼图像的符合等矩投影原理的球面成像模型(包括鱼眼图像坐标系和相机坐标系建立);建立展开窗口坐标系与展开图像坐标系,并求出这两个坐标系之间的关系;建立展开图像坐标系与相机坐标系的关系;求出展开图像坐标系与鱼眼图像坐标系之间的关系;最终可以得到指定任意方向的全部展开图像。本发明弥补了其它只能展开鱼眼镜头顶部信息方法的缺陷,不仅可以复原顶部的信息,也可以复原全部任意方向的信息。即适应于等矩投影原理的鱼眼镜头,也适用于其它投影原理的鱼眼镜头。在图像跟踪、监控及视频会议等领域具有广泛的应用前景。

Description

一种鱼眼图像复原的展开方法
【技术领域】:
本发明涉及基于球面模型的等距投影原理的鱼眼图像的复原与校正,及以鱼眼镜头的任意一条入射光线为光轴的图像展开,属于图像处理技术领域。
【背景技术】:
全方位视觉是指装备有超大广角鱼眼镜头竖直向上放置的一台摄像机一次摄取的一幅图像,可以记录360°方位视角中的全部场景,即把周围前后左右整个区域中的景物“一眼看遍”。这种“全景图像”的获取无需单台摄像机的机械回转进行“摇拍”,或采用多台摄像机同时拍摄多幅图像进行“粘贴”,从而简化了***结构和处理程序,有利于机器视觉应用的实时性要求。它在机动目标跟踪、多目标捕获及相机与目标物互动等应用场合,具有特别的优势和重要的应用价值。这种具有超大广角视野的全景观测可弥补视角窄的不足,在安防监控、管道探测、辅助驾驶、现场监测、车载巡检、飞行器制导及空间机器人等方面都有直接或潜在的应用前景。
鱼眼镜头摄像机视场角接近甚至超过180度,可以实现近距离或超近距离大视场立体视觉感知。鱼眼镜头是建立全方位视觉***最有效的方法之一,相对于反射式全方位视觉镜头,鱼眼镜头具有结构紧凑、体积较小、不易损坏等优点。鱼眼镜头视场角通常达到或超过180度,单一镜头能够捕获半球图像,而使用两个鱼眼镜头则能够一次获取整个空间的完整图像。采用单一鱼眼镜头和图像采集卡构造全方位视觉***,对其相关基础理论进行初步的探索,对其应用进行一定程度上的研究。主要研究图像跟踪***中全方位视觉的图像处理问题。
由于鱼眼摄像头的特殊设计,焦距越短,视角越大;视角越大,因光学原理产生的变形也就越强烈,鱼眼镜头所拍摄的图像除了画面中心的景物保持不变,其他本应水平或垂直的景物都发生了相应的变化,这样鱼眼摄像机获得的全方位图像存在严重的扭曲现象。要有效的利用图像信息进行导航跟踪,需恢复还原图像。研究鱼眼镜头的成像机理,鱼眼镜头投影成像规律,图像畸变成因,进而开发一种算法,使鱼眼图像得到实时、精确的恢复。能准确的校正鱼眼图像中任意范围的图像,进而实现三维空间信息的重建复原。
【发明内容】:
本发明的目的是提供一种基于球面成像模型的按照等距投影原理进行复原的鱼眼图像展开方法,以实现准确的复原鱼眼图像中任意范围的图像,进而拼接实现畸变鱼眼图像的校正与复原;同时可以展开鱼眼镜头所在空间任意方位角与仰角的展开窗口所对应的鱼眼图像。
本发明是一种基于球面等距投影模型的鱼眼图像的展开方法,它是在以下硬件载体上实现的:PC机,鱼眼摄像机,支架。鱼眼摄像机由超大广角鱼眼镜头与高分辩率摄相机组成。支架用于支撑和固定鱼眼摄相机;鱼眼摄相机实时采集结构化环境的空间信息,PC机按本发明的方法进行实时展开处理,利用展开后的信息可以进行其它的有效处理,如车体导航,监控,视频会议等。
本发明是一种基于球面等距投影模型的鱼眼图像的展开方法,使固定不动的鱼眼镜头实现了相当于移动摄像机的功能。其实现方法流程如图2所示,它的具体步骤如下:
第1、建立鱼眼图像的符合等矩投影原理的球面成像模型;
第1.1:建立鱼眼图像坐标系。以鱼眼图像的中心o(x0,y0)为原点建立鱼眼图像坐标系xoy。
第1.2:建立相机坐标系。相机坐标系xcyczc是一个三维坐标系。xc,yc分别与鱼眼图像坐标系的x轴y轴重合,zc轴与鱼眼镜头的光轴重合,且与鱼眼图像坐标系交于O点。
第1.3:以O点为中心,鱼眼图像的半径R为半径做半球,半球与zc轴交于O′点(0,0,R)。
第1.4:假设相机坐标系中一点P,做射线OP,与半球面交于P′(xcp′,ycp′,zcp′)点,此交点在相机坐标系中的坐标为:
(xcp′,ycp′,zcp′)=(Rsinθcosφ,Rsinθsinφ,Rcosθ)  (1)
其中,OP与zc轴的夹角θ为入射角;OP在xoy上的投影OP″与x轴的夹角φ定义为方位角;OP的仰角为β=90°-θ。则根据等矩投影原理:
||OP″||=Kθ    (2)
其中k为等矩投影的畸变系数。
第2、建立展开窗口坐标系与展开图像坐标系,并求出这两个坐标系之间的关系。
第2.1:过P′做球面的切面UwVw,此平面即为展开窗口坐标系所在的平面,展开窗口坐标系的视角为γ;P′Vw与OZ,OP′共面且其正方向垂直于OP′指向OZ;P′Uw的正方向由P′Vw与OP′的叉积决定;定义此切面的方位角为OP的方位角φ,仰角相同于OP的仰角:
β=90°-θ     (3)
第2.2、展开图像坐标系为UwVw,展开图像坐标系UwVw的原点(0,0)在展开图像的左下角;设展开图像的宽与高分别为w,h.
第2.3、展开窗口坐标系上的点与展开图像坐标系上的像素具有一一对应关系,所以展开图像上的一个像素宽度对应于展开平面上的大小为:
w pixel = R × 2 × tan ( β 2 ) / w - - - ( 4 )
根据第2.2可以将展开图像上的像素坐标与展开平面上的点坐标一一对应起来;如展开图像上的一点坐标为Q(m,n),则对应的在展开窗口平面上的坐标为Q′(mwpixel,nwpixel);
第3、建立展开图像坐标系与相机坐标系的关系。
第3.1:建立展开窗口坐标系与相机坐标系的关系。在展开窗口坐标系沿P′Uw正方向每移动wpixel时在相机坐标系上的变化量为:
x方向变化量
dxu=-wpixel*sin(φ)  (5)
y方向变化量
dyu=wpixel*cos(φ)    (6)
z方向的变化量为
dzu=0                (7)
同理在展开窗口坐标系沿P′Vw正方向每移动wpixel时在相机坐标系上的变化量为:
在x方向变化量
dxv=wpixel*cos(θ)*cos(φ)  (8)
y方向变化量为
dyv=wpixel*cos(θ)*sin(φ)  (9)
z方向上的变化量为
dzv=wpixel*sin(θ)          (10)
第3.2:求出展开图像中点Q(m,n)对应的在相机坐标系中的坐标Q″:
(xcp+mdxu+ndxv,ycp+mdyu+ndyv,zcp+mdzu+ndzv)
=R×wpixel×(sinθcosφ-msinφ+ncosθcosφ          (11)
,sinθsin+mcosφ+ncosθsinφ
,cosθ+nsinθ)
第4、求出展开图像坐标系与鱼眼图像坐标系之间的关系。
第4.1、在第3步(11)式中我们已经求出展开图像中的点Q坐标在相机坐标系中的坐标Q″。根据等距投影原理我们可以求出Q″在鱼眼图像中的成像Q″′。Q″的入射角为:
α = tan - 1 ( dis z ) = tan - 1 x 2 + y 2 z
                     (12)
= tan - 1 ( - m sin φ + n cos θ cos φ ) 2 + ( m cos φ + n cos θ sin φ ) 2 n sin θ
方位角为:
λ = tan - 1 y x = tan - 1 m cos φ + n cos θ sin φ - m sin φ + n cos θ cos φ (13)
跟据(2)式等距投影原理可得:Q″′到中心点的长度为r=kα。所以Q″′的坐标为:
xQ″′=rcosλ+x0
                          (14)
yQ″′=rsinλ+y0
其中x0,y0为鱼眼图像的中心坐标,将α与λ代入即可求得恢复后图像上的任一点Q(m,n)对应在鱼眼图像上的点坐标:
Q″′(rcosλ+x0,rsinλ+y0)    (15)
第4.2、将点Q″′(rcosλ+x0,rsinλ+y0)的像素值赋给Q(m,n),组后得出展开图像。
ValueQ(m,n)=ValueQ″′(rcosλ+x0,rsinλ+y0)  (16)
第5、逐点得到全部展开图像
按照第2至第4步的方法,逐点得到展开图像中各点的图像,最后得到全部展开图像。
第6、鱼眼镜头所在空间三维场景的展开。
首先,根据立方体策略,以第1步模型中的半球面的外接半立方体的五个面做为展开窗口,这几个平面的定义分别如下:
第6.1、鱼眼镜头的顶部:取球面顶部与zc轴交点(0,0,R)做切面Pup为展开窗口可恢复鱼眼镜头顶部的图像。展开窗口的大小为2R×2R(宽×高),视角为90°,无方位角,仰角为90°。根据第4步(16)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系。
第6.2、鱼眼镜头的前方:取球面与yc轴的交点(0,R,0)做切面Pfront为前方的展开窗口可恢复鱼眼镜头前方的图像,平面的大小为2R×R,视角为90°,方位角为90°,仰角为0°。根据第4步(16)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系。
第6.3、鱼眼镜头的后方:取球面yc轴的交点(0,-R,0)做切面Pback为后方的展开窗口可恢复鱼眼镜头后方的图像,平面的大小为2R×R,视角为90°,方位角为270°,仰角为0°。根据第4步(16)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系。
第6.4、鱼眼镜头的左面:取球面与xc轴的交点(-R,0,0)做切面Pleft为左面的展开窗口可恢复鱼眼镜头左面的图像,平面的大小为R×2R,视角为90°,方位角为180°,仰角为0°。根据第4步(16)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系。
第6.5、鱼眼镜头的右面:取球面与xc轴的交点(R,0,0)做切面Pright为右面的展开窗口可恢复鱼眼镜头右面的图像,平面的大小为R×2R,视角为90°,方位角为0°,仰角为0°。根据第4步(16)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系。
第7、指定任意方向的展开图像。
以鱼眼镜头所在空间中的任意一个方向为中心,对鱼眼图像进行展开,任意方向的展开需要5个参数,仰角,方位角,视角,恢复后图像的宽与高。给定这5个参数可按照第1步至第4步来进行展开。
第8、展开窗口的漫游。
将展开窗口在球面上运动,并按照第1步到第5步的方法进行展开,可以得到鱼眼图像的漫游图。
本发明的优点和积极效果:
●本发明基于鱼眼镜头的球面成像模型,即适应于等矩投影原理的鱼眼镜头,也适用于其它投影原理的鱼眼镜头。
●本发明弥补了其它只能展开鱼眼镜头顶部信息方法的缺陷,不仅可以复原顶部的信息,也可以复原侧面任意方向的信息,如左右两面。
●本发明可以展开任意方向轴上的“展开窗口”,对图像中敏感信息的抓取具有积极效果。
●本发明的展开效果消除了其它恢复方法边缘“拉扯”的现像,在边缘也可以得到接近现实世界的效果。
●本发明在基于鱼眼镜头的图像跟踪、监控及视频会议等领域都有积极的效果与广泛的应用前景。
【附图说明】:
图1是球面等距投影模型示意图。
图2是本发明所述方法的流程图。
图3是“后面”展开窗口的展开图。
图4是方位角与入射角均为45°的展开图。
图5是立方体策略展开图与拼接。
【具体实施方式】:
下面结合附图和实施例对本发明鱼眼镜头复原的多维展开方法进行详细说明。
实施例1
图像分辨率为1280×1024,鱼眼图像的中心为(504,508),标定后的半径为R=498,畸变系k=5.9。给定方位角为φ=45°,仰角β=45°,视角γ=90°,恢复后图像大小要求为400×400。
第一步:建立鱼眼图像坐标系xy,相机坐标系xcyczc,坐标系的原点为鱼眼图像的中心点(504,508);做半径R=498的半球面,半球面与zc的交点为(0,0,498)。
第二步:求出方位角45°、仰角45°的射线与球面的交点S:
S(R sin(45)*cos(45),R sin(45)*sin(45),R cos(45))=S(249.0,249.0,352.086)。
第三步:过S点做切面PS为展开窗口,视角为90°,坐标轴为US,VS;US的正方向指向xc轴的正方向,VS的正方向指向zc的正方向,原点为S,所以S点在PS上的坐标为S(0,0)。计算出展开图像上一个像素对应于PS上的大小为:
w pixel = R × 2 × tan ( β 2 ) / w = 2.49 .
第四步:计算PS上每移动wpixel在相机坐标系内引起的变化。
没US正方向移动wpixel时在相机坐标系内引起的变化为:
xc方向:dxu=wpixel sinφ=1.760
yc方向:dyu=-wpixel cosφ=-1.760
zc方向:dzu=0
沿VS正方向移动wpixel时在相机坐标系内引起的变化为:
xc方向:dxv=-wpixel*cos(θ)*cos(φ)=-1.245
yc方向:dyv=-wpixel*cos(θ)*sin(φ)=-1.245
zc方向:dzv=wpixel*sin(θ)=1.760
第五步:建立展开图像坐标系。展开后图像大小为400×400,将坐标系的原点设在图像的中心(200,200),所以图像上的第一个像素坐标为(-200,-200)。
第六步:计算(-200,-200)在PS上的坐标。按照公式(11)算为:
(-200wpixel,-200wpixel)=(-498,-498)
第七步:计算(-200,-200)在相机坐标系中的坐标。按照发明内容中的第3步进行计算。
x=xs-200×dxu+(-200)×dxv=249.0+103.0=352.0
y=ys-200×dyu+(-200)×dyv=249.0+601.0=850.0
z=zs-200×dxu+(-200)×dxv=352.086-352=0.086
第八步:按照等矩投影原理计算投影在鱼眼图像上的坐标。按照发明内容中的第4步计算。
入射角
方位角
Figure GSA00000055311200072
到中点的矩离r=kα=5.9×90=531
所以计算坐标为 xQ″′=rcosλ+x0=531×cos67.5+504=203.2+504=707
               yQ″′=rsinλ+y0=531×sin67.5+508=490.6+508=999
到这里就计算出了展开图像中第一个像素(0,0)对应于鱼眼图像中的坐标。
第九步:计算展开图像中其它像素对于鱼眼图像中的坐标,该点的RGB值是(109,204,63),所以展开图像上的第一个像素的值就为(109,204,63)。对展开图像中的坐标逐点进行计算,就可以得到整个展开图像。图4为展开后的图像与原图像。
图3是“后面”展开窗口的展开图。图5是立方体策略展开图与拼接。
通过以上的实施方式的具体描述,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以实现本发明所述的方法。
以上公开的仅为本发明的一个具体实施例,但是,本发明并非局限于此,任何本领域的技术人员能思之的变化都应落入本发明的保护范围。

Claims (3)

1.一种基于球面等距投影模型的鱼眼图像复原的展开方法,其特征在于该方法的具体步骤如下:
第1、建立鱼眼图像的符合等矩投影原理的球面成像模型
第1.1、建立鱼眼图像坐标系:以鱼眼图像的中心o(x0,y0)为原点建立鱼眼图像坐标系xoy;
第1.2、建立相机坐标系:相机坐标系xcyczc是一个三维坐标系;xc,yc分别与鱼眼图像坐标系的x轴、y轴重合,zc轴与鱼眼镜头的光轴重合,且与鱼眼图像坐标系交于O点;
第1.3、以O点为中心,鱼眼图像的半径R为半径做半球,半球与zc轴交于O′点(0,0,R);
第1.4、相机坐标系中一点P,做射线OP,与半球面交于P′(xcp′,ycp′,zcp′)点,此交点在相机坐标系中的坐标为:
(xcp′,ycp′,zcp′)=(Rsinθcosφ,Rsinθsinφ,Rcosθ)  (1)
其中,OP与zc轴的夹角θ为入射角;OP在xoy上的投影OP″与x轴的夹角φ定义为方位角;OP的仰角为β=90°-θ,则根据等矩投影原理:
‖OP″‖=kθ            (2)
其中k为等矩投影的畸变系数;
第2、建立展开窗口坐标系与展开图像坐标系,并求出这两个坐标系之间的关系
第2.1、过P′做球面的切面UwVw,此平面即为展开窗口坐标系所在的平面,展开窗口坐标系的视角为γ;P′Vw与OZ,OP′共面且其正方向垂直于OP′指向OZ;P′Uw的正方向由P′Vw与OP′的叉积决定;定义此切面的方位角为OP的方位角φ,仰角相同于OP的仰角:
β=90°-θ              (3);
第2.2、展开图像坐标系为UwVw,展开图像坐标系UwVw的原点(0,0)在展开图像的左下角;设展开图像的宽与高分别为w,h;
第2.3、展开窗口坐标系上的点与展开图像坐标系上的像素具有一一对应关系,所以展开图像上的一个像素宽度对应于展开平面上的大小为:
w pixel = R × 2 × tan ( β 2 ) / w - - - ( 4 )
根据第2.2可以将展开图像上的像素坐标与展开平面上的点坐标一一对应起来;如展开图像上的一点坐标为Q(m,n),则对应的在展开窗口平面上的坐标为Q′(mwpixel,nwpixel);
第3、建立展开图像坐标系与相机坐标系的关系
第3.1、建立展开窗口坐标系与相机坐标系的关系:在展开窗口坐标系沿P′Uw正方向每移动wpixel时在相机坐标系上的变化量为:
x方向变化量
dxu=-wpixel*sin(φ)                    (5)
y方向变化量
dyu=wpixel*cos(φ)                     (6)
z方向的变化量为
dzu=0                                  (7)
同理在展开窗口坐标系沿P′Vw正方向每移动wpixel时在相机坐标系上的变化量为:
在x方向变化量
dxv=wpixel*cos(θ)*cos(φ)             (8)
y方向变化量为
dyv=wpixel*cos(θ)*sin(φ)             (9)
z方向上的变化量为
dzv=wpixel*sin(θ)                     (10)
第3.2、求出展开图像中点Q(m,n)对应的在相机坐标系中的坐标Q″:
(xcp+mdxu+ndxv,ycp+mdyu+ndyv,zcp+mdzu+ndzv)
=R×wpixel×(sinθcosφ-msinφ+ncosθcosφ(11)
,sinθsinφ+mcosφ+ncosθsinφ
,cosθ+nsinθ)
第4、求出展开图像坐标系与鱼眼图像坐标系之间的关系
第4.1、在第3步式(11)中已经求出展开图像中的点Q坐标对应在相机坐标系中的坐标Q″,根据等距投影原理可以求出Q″在鱼眼图像中的成像Q′″;Q″的入射角为:
α = tan - 1 ( dis z ) = tan - 1 x 2 + y 2 z
= tan - 1 ( - m sin φ + n cos θ cos φ ) 2 + ( m cos φ + n cos θ sin φ ) 2 n sin θ - - - ( 12 ) 方位角为:
λ = tan - 1 y x = tan - 1 m cos φ + n cos θ sin φ - m sin φ + n cos θ cos φ - - - ( 13 )
根据等距投影原理(2)式可得:Q′″到中心点的长度为r=kα;所以Q′″的坐标为:
x Q ′ ′ ′ = r cos λ + x 0 (14)
yQ′″=rsinλ+y0
其中x0,y0为鱼眼图像的中心坐标,将α与λ代入即可求得恢复后图像上的任一点Q(m,n)对应在鱼眼图像上的点坐标:
Q″′(rcosλ+x0,rsinλ+y0)          (15)
第4.2、将点Q′″(rcosλ+x0,rsinλ+y0)的像素值赋给Q(m,n),组后得出展开图像;
ValueQ(m,n)=ValueQ′″(rcosλ+x0,rsinλ+y0)      (16)
第5、得到全部展开图像
按照第2至第4步的方法,逐点得到展开图像中各点的图像值,最后得到全部展开图像。
2.根据权利要求1所述的方法,其特征在于可以得到鱼眼镜头所在空间三维场景的展开图像
第6、根据立方体策略,以第1步模型中的半球面的外接半立方体的五个面做为展开窗口,这几个平面的定义分别如下:
第6.1、鱼眼镜头的顶部:取球面顶部与zc轴交点(0,0,R)做切面Pup为展开窗口可恢复鱼眼镜头顶部的图像;展开窗口的大小为2R宽×2R高,视角为90°,无方位角,仰角为90°;根据第4步(15)式求得展开图像与鱼眼图像之间的关系;
第6.2、鱼眼镜头的前方:取球面与yc轴的交点(0,R,0)做切面Pfront为前方的展开窗口可恢复鱼眼镜头前方的图像,平面的大小为2R×R,视角为90°,方位角为90°,仰角为0°;根据第4步(16)中所述的方法逐点求得展开图像与鱼眼图像之间的关系;
第6.3、鱼眼镜头的后方:取球面yc轴的交点(0,-R,0)做切面Pback为后方的展开窗口可恢复鱼眼镜头后方的图像,平面的大小为2R×R,视角为90°,方位角为270°,仰角为0°;根据第4步(15)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系;
第6.4、鱼眼镜头的左面:取球面与xc轴的交点(-R,0,0)做切面Pleft为左面的展开窗口可恢复鱼眼镜头左面的图像,平面的大小为R×2R,视角为90°,方位角为180°,仰角为0°;根据第4步(15)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系;
第6.5、鱼眼镜头的右面:取球面与xc轴的交点(R,0,0)做切面Pright为右面的展开窗口可恢复鱼眼镜头右面的图像,平面的大小为R×2R,视角为90°,方位角为0°,仰角为0°;根据第4步(15)式中所述的方法逐点求得展开图像与鱼眼图像之间的关系。
3.根据权利要求1所述的方法,其特征在于可以得到指定任意方向的展开图像
以鱼眼镜头所在空间中的任意一个方向为中心,对鱼眼图像进行展开,任意方向的展开需要5个参数,仰角,方位角,视角,恢复后图像的宽与高;给定这5个参数可按照第1步至第4步来进行展开。
CN2010101255230A 2010-03-17 2010-03-17 一种鱼眼图像复原的展开方法 Expired - Fee Related CN101814181B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2010101255230A CN101814181B (zh) 2010-03-17 2010-03-17 一种鱼眼图像复原的展开方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010101255230A CN101814181B (zh) 2010-03-17 2010-03-17 一种鱼眼图像复原的展开方法

Publications (2)

Publication Number Publication Date
CN101814181A true CN101814181A (zh) 2010-08-25
CN101814181B CN101814181B (zh) 2012-05-23

Family

ID=42621429

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010101255230A Expired - Fee Related CN101814181B (zh) 2010-03-17 2010-03-17 一种鱼眼图像复原的展开方法

Country Status (1)

Country Link
CN (1) CN101814181B (zh)

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102072702A (zh) * 2010-12-31 2011-05-25 天津市亚安科技电子有限公司 一种双摄像机图像对应位置的计算方法
CN103247030A (zh) * 2013-04-15 2013-08-14 丹阳科美汽车部件有限公司 基于球面投影模型和逆变换模型的车辆全景显示***鱼眼图像校正方法
CN103325109A (zh) * 2013-05-29 2013-09-25 山西绿色光电产业科学技术研究院(有限公司) 适用于墙装式全景摄像机的鱼眼图像的畸变校正方法
CN104135608A (zh) * 2014-05-21 2014-11-05 张家港恩达通讯科技有限公司 一种鱼眼镜头图像的展平方法及***
CN104363421A (zh) * 2014-11-04 2015-02-18 福建星网视易信息***有限公司 实现多角度摄像头监控效果的方法和装置
CN104539893A (zh) * 2014-12-23 2015-04-22 福建星网视易信息***有限公司 实现虚拟云台监控效果的方法、装置及***
CN105007411A (zh) * 2015-06-30 2015-10-28 广东欧珀移动通信有限公司 一种畸变校正的方法及移动终端
CN105516569A (zh) * 2016-01-20 2016-04-20 北京疯景科技有限公司 一种获得全景图像的方法和装置
CN105898339A (zh) * 2016-04-12 2016-08-24 乐视控股(北京)有限公司 一种全景视频转码的方法及装置
CN105898344A (zh) * 2016-04-12 2016-08-24 乐视控股(北京)有限公司 一种全景视频的播放方法和装置
CN106101588A (zh) * 2016-07-08 2016-11-09 成都易瞳科技有限公司 全景图像渐晕现象的补偿方法
CN104200454B (zh) * 2014-05-26 2017-02-01 深圳市中瀛鑫科技股份有限公司 鱼眼图像畸变校正方法及装置
CN106600546A (zh) * 2016-11-14 2017-04-26 Tcl集团股份有限公司 一种超广角摄像头畸变校正方法及***
CN106780389A (zh) * 2016-12-23 2017-05-31 浙江宇视科技有限公司 一种基于坐标转换的鱼眼图像校正方法及装置
CN106791578A (zh) * 2016-12-26 2017-05-31 西安电子科技大学 基于鱼眼全景摄像机的视频会议实现方法
CN107133918A (zh) * 2017-05-05 2017-09-05 陈健 一种在三维场景中任意位置生成全景图的方法
CN107154027A (zh) * 2017-04-17 2017-09-12 深圳大学 一种畸变图像复原的补偿方法及装置
CN107346530A (zh) * 2016-05-06 2017-11-14 完美幻境(北京)科技有限公司 一种修正鱼眼图像的投影方法及***
CN107767422A (zh) * 2017-09-18 2018-03-06 深圳开阳电子股份有限公司 一种鱼眼镜头的校正方法、装置及便携式终端
CN107993276A (zh) * 2016-10-25 2018-05-04 杭州海康威视数字技术股份有限公司 一种全景图像的生成方法及装置
WO2018102990A1 (en) * 2016-12-06 2018-06-14 SZ DJI Technology Co., Ltd. System and method for rectifying a wide-angle image
CN108805801A (zh) * 2018-05-24 2018-11-13 北京华捷艾米科技有限公司 一种全景图像校正方法及***
CN109308686A (zh) * 2018-08-16 2019-02-05 北京市商汤科技开发有限公司 一种鱼眼图像处理方法及装置、设备和存储介质
CN110021044A (zh) * 2018-01-10 2019-07-16 华晶科技股份有限公司 利用双鱼眼图像计算所摄物体坐标的方法及图像获取装置
CN111091117A (zh) * 2019-12-31 2020-05-01 北京城市网邻信息技术有限公司 用于二维全景图像的目标检测方法、装置、设备、介质
CN112530173A (zh) * 2020-12-03 2021-03-19 北京百度网讯科技有限公司 路侧感知方法、装置、电子设备、存储介质及路侧设备
CN112541861A (zh) * 2019-09-23 2021-03-23 华为技术有限公司 图像处理方法、装置、设备及计算机存储介质
CN112565730A (zh) * 2020-12-03 2021-03-26 北京百度网讯科技有限公司 路侧感知方法、装置、电子设备、存储介质及路侧设备
CN113344788A (zh) * 2021-06-17 2021-09-03 天津理工大学 一种基于图像拼接参数提取的全景相机及其实时性参数优化方法
CN115514944A (zh) * 2022-09-21 2022-12-23 南京创斐信息技术有限公司 一种智能家居投影角度校正***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006295626A (ja) * 2005-04-12 2006-10-26 Canon Inc 魚眼像処理装置及びその方法並びに魚眼像撮像装置
CN101072288A (zh) * 2007-06-15 2007-11-14 林进灯 取得鱼眼影像校正关系与鱼眼校正的方法
US20090141148A1 (en) * 2007-12-04 2009-06-04 Kosuke Imamura Distortion-corrected image generation unit and distortion-corrected image generation method
CN101577002A (zh) * 2009-06-16 2009-11-11 天津理工大学 应用于目标检测的鱼眼镜头成像***标定方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006295626A (ja) * 2005-04-12 2006-10-26 Canon Inc 魚眼像処理装置及びその方法並びに魚眼像撮像装置
CN101072288A (zh) * 2007-06-15 2007-11-14 林进灯 取得鱼眼影像校正关系与鱼眼校正的方法
US20090141148A1 (en) * 2007-12-04 2009-06-04 Kosuke Imamura Distortion-corrected image generation unit and distortion-corrected image generation method
CN101577002A (zh) * 2009-06-16 2009-11-11 天津理工大学 应用于目标检测的鱼眼镜头成像***标定方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
《云南民族大学学报(自然科学版)》 20040731 陈明伟 等 球面坐标定位校正鱼眼图片并合成全景图的方法 214-217 1-3 第13卷, 第3期 2 *
《电子测量技术》 20080930 秦洁 等 基于DSP的SVM算法实现鱼眼镜头畸变校正 154-184 1-3 第31卷, 第9期 2 *

Cited By (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102072702A (zh) * 2010-12-31 2011-05-25 天津市亚安科技电子有限公司 一种双摄像机图像对应位置的计算方法
CN102072702B (zh) * 2010-12-31 2015-11-18 天津市亚安科技股份有限公司 一种双摄像机图像对应位置的计算方法
CN103247030A (zh) * 2013-04-15 2013-08-14 丹阳科美汽车部件有限公司 基于球面投影模型和逆变换模型的车辆全景显示***鱼眼图像校正方法
CN103325109A (zh) * 2013-05-29 2013-09-25 山西绿色光电产业科学技术研究院(有限公司) 适用于墙装式全景摄像机的鱼眼图像的畸变校正方法
CN103325109B (zh) * 2013-05-29 2016-02-17 湖南源信光电科技有限公司 适用于墙装式全景摄像机的鱼眼图像的畸变校正方法
CN104135608A (zh) * 2014-05-21 2014-11-05 张家港恩达通讯科技有限公司 一种鱼眼镜头图像的展平方法及***
CN104135608B (zh) * 2014-05-21 2017-07-14 张家港恩达通讯科技有限公司 一种鱼眼镜头图像的展平方法及***
CN104200454B (zh) * 2014-05-26 2017-02-01 深圳市中瀛鑫科技股份有限公司 鱼眼图像畸变校正方法及装置
CN104363421A (zh) * 2014-11-04 2015-02-18 福建星网视易信息***有限公司 实现多角度摄像头监控效果的方法和装置
CN104363421B (zh) * 2014-11-04 2017-11-14 福建星网视易信息***有限公司 实现多角度摄像头监控效果的方法和装置
CN104539893A (zh) * 2014-12-23 2015-04-22 福建星网视易信息***有限公司 实现虚拟云台监控效果的方法、装置及***
CN104539893B (zh) * 2014-12-23 2017-12-01 福建星网视易信息***有限公司 实现虚拟云台监控效果的方法、装置及***
CN105007411A (zh) * 2015-06-30 2015-10-28 广东欧珀移动通信有限公司 一种畸变校正的方法及移动终端
CN105007411B (zh) * 2015-06-30 2018-01-23 广东欧珀移动通信有限公司 一种畸变校正的方法及移动终端
CN105516569A (zh) * 2016-01-20 2016-04-20 北京疯景科技有限公司 一种获得全景图像的方法和装置
CN105898339A (zh) * 2016-04-12 2016-08-24 乐视控股(北京)有限公司 一种全景视频转码的方法及装置
CN105898344A (zh) * 2016-04-12 2016-08-24 乐视控股(北京)有限公司 一种全景视频的播放方法和装置
CN107346530B (zh) * 2016-05-06 2020-09-04 完美幻境(北京)科技有限公司 一种修正鱼眼图像的投影方法及***
CN107346530A (zh) * 2016-05-06 2017-11-14 完美幻境(北京)科技有限公司 一种修正鱼眼图像的投影方法及***
CN106101588B (zh) * 2016-07-08 2019-05-14 成都易瞳科技有限公司 全景图像渐晕现象的补偿方法
CN106101588A (zh) * 2016-07-08 2016-11-09 成都易瞳科技有限公司 全景图像渐晕现象的补偿方法
CN107993276A (zh) * 2016-10-25 2018-05-04 杭州海康威视数字技术股份有限公司 一种全景图像的生成方法及装置
US11330172B2 (en) 2016-10-25 2022-05-10 Hangzhou Hikvision Digital Technology Co., Ltd. Panoramic image generating method and apparatus
CN107993276B (zh) * 2016-10-25 2021-11-23 杭州海康威视数字技术股份有限公司 一种全景图像的生成方法及装置
CN106600546A (zh) * 2016-11-14 2017-04-26 Tcl集团股份有限公司 一种超广角摄像头畸变校正方法及***
CN106600546B (zh) * 2016-11-14 2020-12-22 深圳市Tcl高新技术开发有限公司 一种超广角摄像头畸变校正方法及***
US11195252B2 (en) 2016-12-06 2021-12-07 SZ DJI Technology Co., Ltd. System and method for rectifying a wide-angle image
WO2018102990A1 (en) * 2016-12-06 2018-06-14 SZ DJI Technology Co., Ltd. System and method for rectifying a wide-angle image
CN106780389A (zh) * 2016-12-23 2017-05-31 浙江宇视科技有限公司 一种基于坐标转换的鱼眼图像校正方法及装置
CN106780389B (zh) * 2016-12-23 2021-06-15 浙江宇视科技有限公司 一种基于坐标转换的鱼眼图像校正方法及装置
CN106791578A (zh) * 2016-12-26 2017-05-31 西安电子科技大学 基于鱼眼全景摄像机的视频会议实现方法
CN107154027B (zh) * 2017-04-17 2020-07-07 深圳大学 一种畸变图像复原的补偿方法及装置
CN107154027A (zh) * 2017-04-17 2017-09-12 深圳大学 一种畸变图像复原的补偿方法及装置
CN107133918B (zh) * 2017-05-05 2020-06-12 陈健 一种在三维场景中任意位置生成全景图的方法
CN107133918A (zh) * 2017-05-05 2017-09-05 陈健 一种在三维场景中任意位置生成全景图的方法
CN107767422A (zh) * 2017-09-18 2018-03-06 深圳开阳电子股份有限公司 一种鱼眼镜头的校正方法、装置及便携式终端
CN110021044A (zh) * 2018-01-10 2019-07-16 华晶科技股份有限公司 利用双鱼眼图像计算所摄物体坐标的方法及图像获取装置
CN110021044B (zh) * 2018-01-10 2022-12-20 华晶科技股份有限公司 利用双鱼眼图像计算所摄物体坐标的方法及图像获取装置
CN108805801A (zh) * 2018-05-24 2018-11-13 北京华捷艾米科技有限公司 一种全景图像校正方法及***
CN109308686A (zh) * 2018-08-16 2019-02-05 北京市商汤科技开发有限公司 一种鱼眼图像处理方法及装置、设备和存储介质
CN109308686B (zh) * 2018-08-16 2022-06-24 北京市商汤科技开发有限公司 一种鱼眼图像处理方法及装置、设备和存储介质
WO2021057626A1 (zh) * 2019-09-23 2021-04-01 华为技术有限公司 图像处理方法、装置、设备及计算机存储介质
CN112541861A (zh) * 2019-09-23 2021-03-23 华为技术有限公司 图像处理方法、装置、设备及计算机存储介质
CN112541861B (zh) * 2019-09-23 2024-05-24 华为技术有限公司 图像处理方法、装置、设备及计算机存储介质
CN111091117A (zh) * 2019-12-31 2020-05-01 北京城市网邻信息技术有限公司 用于二维全景图像的目标检测方法、装置、设备、介质
CN112565730A (zh) * 2020-12-03 2021-03-26 北京百度网讯科技有限公司 路侧感知方法、装置、电子设备、存储介质及路侧设备
CN112530173A (zh) * 2020-12-03 2021-03-19 北京百度网讯科技有限公司 路侧感知方法、装置、电子设备、存储介质及路侧设备
CN112565730B (zh) * 2020-12-03 2023-07-25 阿波罗智联(北京)科技有限公司 路侧感知方法、装置、电子设备、存储介质及路侧设备
CN113344788A (zh) * 2021-06-17 2021-09-03 天津理工大学 一种基于图像拼接参数提取的全景相机及其实时性参数优化方法
CN115514944A (zh) * 2022-09-21 2022-12-23 南京创斐信息技术有限公司 一种智能家居投影角度校正***

Also Published As

Publication number Publication date
CN101814181B (zh) 2012-05-23

Similar Documents

Publication Publication Date Title
CN101814181B (zh) 一种鱼眼图像复原的展开方法
US9858639B2 (en) Imaging surface modeling for camera modeling and virtual view synthesis
CN101809991B (zh) 利用旋转对称广角透镜获得全景和直线性图像的方法和装置
CN101271187B (zh) 无死角的双目立体全方位视觉传感装置
Nayar Omnidirectional video camera
CN101004538B (zh) 无死角的全方位视觉传感器
US8798451B1 (en) Methods of obtaining panoramic images using rotationally symmetric wide-angle lenses and devices thereof
CN107660337A (zh) 用于从鱼眼摄像机产生组合视图的***及方法
CN107705252B (zh) 适用于双目鱼眼图像拼接展开校正的方法及***
JP4825971B2 (ja) 距離算出装置、距離算出方法、構造解析装置及び構造解析方法。
CN104835117A (zh) 基于重叠方式的球面全景图生成方法
Gao et al. Dual-fisheye omnidirectional stereo
JP2016180866A (ja) 空撮装置
CN108769569B (zh) 一种用于无人机的360度立体全景观测***及方法
CN106534670B (zh) 一种基于固联鱼眼镜头摄像机组的全景视频生成方法
RU2698479C2 (ru) Система, способ и применения съемки
CN108737743B (zh) 基于图像拼接的视频拼接装置及视频拼接方法
CN104952105A (zh) 一种三维人体姿态估计方法和装置
WO2009017332A1 (en) Methods of obtaining panoramic images using rotationally symmetric wide-angle lenses and devices thereof
CN102915526A (zh) 基于互补场景模型的球面全景图缺失信息修复方法
CN108765292A (zh) 基于空间三角面片拟合的图像拼接方法
JP2011087319A (ja) 車載パノラマカメラシステム
Tan et al. Multiview panoramic cameras using a mirror pyramid
Kweon et al. Image-processing based panoramic camera employing single fisheye lens
Jamaluddin et al. Design and calibration of an omni-RGB+ D camera

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120523

Termination date: 20130317