CN1582459A - 矫正梯形畸变的***及方法 - Google Patents

矫正梯形畸变的***及方法 Download PDF

Info

Publication number
CN1582459A
CN1582459A CNA028157389A CN02815738A CN1582459A CN 1582459 A CN1582459 A CN 1582459A CN A028157389 A CNA028157389 A CN A028157389A CN 02815738 A CN02815738 A CN 02815738A CN 1582459 A CN1582459 A CN 1582459A
Authority
CN
China
Prior art keywords
distortion
angle
projector
projection
image transformation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA028157389A
Other languages
English (en)
Other versions
CN100465995C (zh
Inventor
凯鲁特·保文奇
李·路易
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Geo Semiconductor Inc
Original Assignee
Silicon Optix Inc Canada
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Silicon Optix Inc Canada filed Critical Silicon Optix Inc Canada
Publication of CN1582459A publication Critical patent/CN1582459A/zh
Application granted granted Critical
Publication of CN100465995C publication Critical patent/CN100465995C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0025Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical correction, e.g. distorsion, aberration
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B27/00Photographic printing apparatus
    • G03B27/32Projection printing apparatus, e.g. enlarger, copying camera
    • G03B27/52Details
    • G03B27/68Introducing or correcting distortion, e.g. in connection with oblique projection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/74Projection arrangements for image reproduction, e.g. using eidophor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3185Geometric adjustment, e.g. keystone or convergence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20021Dividing image into blocks, subimages or windows

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Geometry (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Projection Apparatus (AREA)
  • Image Processing (AREA)

Abstract

一种矫正投影图像畸变的***和方法,所述畸变是由一个投影仪镜头将一个输入图像投射到与投影仪的投影轴不正交的一个投影屏幕上时所造成的。其中,先获取投影参数,所述投影参数包括投影仪镜头焦距,以及代表投影仪的泛角、倾斜角和倾侧角的角度值。接着确定投影区域和适合于所述投影区域内部的最佳可视矩形区域。然后通过一个与存在于最佳可视矩形区域的顶点和投影区域的对应顶点之间的变换对应的畸变变换,特征化由投影引起的畸变。最后,翻转所述畸变变换并将其应用于输入图像,以获得无畸变的投影图像。

Description

矫正梯形畸变的***及方法
技术领域
本发明涉及一种数字图像处理和空间图像变换技术,特别涉及一种矫正图像多轴位移畸变的***及方法。
技术背景
通常,当将图像以一定的仰角或俯角投射到平面时,会产生梯形畸变。当位于屏幕下方的投影仪向上投影到屏幕上时,经常出现上述问题。投射出的图像具有通常所说的“上部过重”的现象。
图1A、图1B及图2是离轴投射的效果示意图。特别地,图2示出了用于投射出如图1所示正方形图像的投影仪5和屏幕7的位置关系。图1A所示的是投影在沿着图2中Y轴设置的理想屏幕上的理想图像,而图1B所示的则是投射在沿着图2中V轴设置的实际屏幕上的头部过重的畸变图像。从图中可以看出,投射后的正方形图像出现了头部过重的畸变现象,而这些不统一的间隔栅格的出现是由于如图2所示的透视作用。其中,畸变的程度取决于投射的角度θ、投影仪5与屏幕间的距离d、以及投影仪的孔径2α。图2只显示了一个轴向的畸变。如图3所示,其中示出了产生图1所示正方形图像的投影图由投影仪5沿着两个轴向以仰角θ和泛角(pan angle)投射而在投影屏幕(即图3中所示的实际屏幕)上产生的畸变图像。
现有技术中的一种矫正投影***畸变的办法是利用机械***来移动光轴以补偿实际畸变。然而,此类机械***往往只能矫正一个轴向,通常为垂直轴向,从而缺乏灵活性。
在授权给布莱洛克(Blalock)等人的美国专利U.S.5,465,121中公开了现有技术中的另一种解决方案,其中使用一个数据处理***,通过使用一个简单高度(Simple Height)和像素方程(pixel equation)来消除像素以矫正畸变。然而,该***仅能有效矫正垂直方向的畸变,而对两个或两个以上方向的畸变则不能有效补偿。
在授权给陈(Chen)等人的美国U.S.6,367,933中描述了现有技术的又一种解决方案,也就是一种矫正在两角度,水平角、泛角和垂直角、倾斜角的离轴投影时产生的梯形畸变的方法。该方法通过一系列的两个单轴向梯形畸变以进行二维矫正。首先矫正倾角,然后将矫正后的图像旋转90度。再对旋转后的图像进行垂直角度的畸变校正而保持水平泛角度不变。最后将图像往回旋转-90度。由于旋转+/-90度的过程需要存储介质来存储旋转的整个或部分图像,所以该方法将导致处理延迟并需要存储介质。此外,该方法仅是特别针对水平和垂直角度畸变,因为采用旋转+/-90度方法不需要很复杂的插值技术。如果还出现如图4所示的倾侧角(或者出现其他任何畸变,如放射透镜畸变),则上述方法还需要另一个特殊的模块来处理此类畸变,这必将进一步导致处理延迟及增加开销。
因此,需提供一种矫正图像多轴位移畸变的***和方法,以解决上述提供非畸变图像的方案中所存在的缺点。
发明内容
一方面,本发明提供一种矫正投影图像畸变的方法,所述畸变是由一个投影仪镜头将一个输入图像投射到与投影仪的投影轴不正交的一个投影屏幕上时所造成的,所述投影屏幕与一个显示设备联接,所述方法包括以下步骤:
(a)接收投影参数,所述投影参数包括投影仪镜头焦距,与显示设备的高宽比相关的输入图像的高宽比,以及代表投影仪的泛角、倾斜角和倾侧角的角度值;
(b)确定根据步骤(a)给出的投影参数所形成的畸变的投影区域,然后确定适合于所述投影区域内部的最佳可视矩形区域的顶点,以使所述最佳可视矩形区域的周长达到最大值;
(c)通过一个与存在于最佳可视矩形区域的顶点和投影区域的对应顶点之间的变换对应的畸变变换,特征化由投影引起的畸变;
(d)翻转所述畸变变换,以形成一个预畸变图像变换;以及,
(e)将所述预畸变图像变换施加到所述输入图像,以获得一个无畸变的投影图像。
另一方面,本发明还提供一种矫正投影图像畸变的***,所述畸变是由一个投影仪镜头将一个输入图像投射到与投影仪的投影轴不正交的一个投影屏幕上时所造成的,所述投影屏幕与一个显示设备联接,所述***包括:
(a)一个用于存储投影参数的存储器,所述投影参数包括投影仪镜头焦距,与显示设备的高宽比相关的输入图像的高宽比,以及代表投影仪的泛角、倾斜角和倾侧角的角度值;
(b)一个与所述存储器连接的处理器,所述处理器用于确定根据步骤(a)给出的投影参数形成的畸变的投影区域,然后确定适合于所述投影区域内部的最佳可视矩形区域的顶点,以使所述最佳可视矩形区域的周长达到最大值;
(c)所述处理器也用于通过一个与存在于最佳可视矩形区域的顶点和投影区域的对应顶点之间的变换对应的畸变变换,特征化由投影引起的畸变;
(d)所述处理器还用于翻转所述畸变变换,以形成一个预畸变图像变换;以及
(e)所述处理器还用于将所述预畸变图像变换施加到所述输入图像,以获得一个无畸变的投影图像。
本发明的其他方面和优点将结合附图在下文描述。
附图说明
附图中:
图1A和1B分别是投射到投影屏幕上的正方形图像的理想投影图和畸变投影图;
图2是现有技术中一个传统投影仪的示意图;
图3是与图1A及1B中的投影图像相关的投影设备的示意图;
图4是当投影仪的三坐标轴与屏幕参考轴不一致时,正方形图像的投影图;
图5是本发明一个实施例中投影矫正***的原理框图;
图6是投影屏幕为平面的投影***的一个基本模型示意图;
图7是投影屏幕与投影轴为非正交关系的投影***的另一模型示意图;
图8是表示将正方形输入图像投射到图6中的投影屏幕和用于计算最佳可视区域的参考点的示意图;
图9A是用于投射图8中正方形图像的投影屏幕的示意图;
图9B是对图8中的矩形进行调整以匹配显示设备的屏幕高宽比的示意图;
图10A是与显示设备具有不同的高宽比的输出图像的示意图;
图10B是在4∶3的显示设备上投射的16∶9变形图像的最佳可视区域示意图;
图10C是在优化至16∶9的4∶3的显示设备上投射的16∶9变形图像的最佳可视区域示意图;
图11A是较显示设备具有不同高宽比的投影图的正前变换的示意图;
图11B是较显示设备具有不同高宽比的投影图的正前变换且优化了投影区域以匹配投影内容高宽比的示意图;
图11C是与显示设备具有不同高宽比的投影图的反向变换的示意图;
图11D是较显示设备具有不同高宽比的投影图的反向变换且优化了投影区域以匹配投影内容高宽比的示意图;
图12是根据本发明的矫正方法的一部分建立全部投影畸变参数的主要处理步骤流程图;
图13是为由图12生成的畸变参数建立多项式***器的附加处理步骤流程图;
图14A是正方形栅格图像投射到投影屏幕时的畸变示意图;
图14B是图14A中的输入图像的示意图;
图14C和图14D是图14B中的预畸变输入图像的第一步处理和第二步处理的示意图,它们都是由预畸变图像(图14D)生成,并可用于补偿投影时产生的畸变;
图15A是投影和透镜畸变连接关系示意图;
图15B是由图15A所示的连接生成的预畸变输入图像的示意图。
具体实施方式
图5示出了根据本发明构建的一个投影矫正***10。其中,矫正***10可识别不同的投影畸变参数,产生与上述投影参数相应的反向变换,利用反向变换接收输入的图像数据并对其进行预畸变处理,并输出预畸变处理后的图像数据,该预畸变处理后的图像投射到屏幕时,会产生无畸变的图像(图中未画出)。特别地,该矫正***10包括一个投影参数模块12、一个计算模块14、一个图像处理器16、一个投影仪方位探测器18及一个扭曲系数数据库20。
投影方向探测器18可以是任何可捕捉投影仪与投影屏幕之间的相对方位的自动设备。虽然较佳的方式是使用者手动输入***的方位和光学***的焦距,但也可以采用由投影仪方位探测器18提供方位角度。有三个重要的数据需提供给矫正***10,分别为投影仪方位角(将在图7中详细描述)、输入图像的相对高宽比和投影仪显示设备的高宽比、以及投影仪镜头的焦距f。投影参数经处理以在畸变参数表中寻找合适的指标,并输入到图像处理器16。
投影参数模块12用于接收一系列投影参数数据,这些投影参数数据与投影仪5的投影轴和投影仪屏幕7的表面间之间的多个相对角坐标相关。所述投影参数数据可由投影仪方位探测器18检测出来并输入到投影参数处理模块12。其中一些投影参数数据用于手动方案,而在自动方案中,将由矫正***10实时地提供角坐标,同时由投影参数模块12确定相关的畸变系数。
扭曲度计算模块14可生成一个图像变换,所述图像变换可补偿多轴位移畸变。特别地,扭曲度计算模块14计算与投影参数模块12提供的投影参数数据相应的扭曲多项式。投影参数模块12从扭曲系数数据库20中获取适当的多项式扭曲系数。每一扭曲系数是一个角坐标函数,由扭曲度计算模块14确定其值并将其格式化,以作为适于图像处理器16处理的输入数据。
图像处理器16,或扭曲工具,根据反向畸变参数对输入图像重新采样。即,由扭曲计算模块14确定的图像变换及输入图像数据被执行,使得反向畸变的输入图像投影到屏幕上时,可显示矫正的图像。从后面的介绍可知,图像变换最好作为两个一维的图像变换来处理,以提高处理的效率。众所周知,由于将一个二维操作减为两个一维操作,使两个一维变换简化了存储器访问及二维过滤的硬件执行。
投影图像的外观会受投影仪5的特殊角坐标(即绕三轴旋转的程度)影响。特别地,当出现离轴位移时,输入图像的畸变形式将被投影到屏幕上。与投影图像相关的畸变也是投影仪孔径或投影仪焦距、以及镜头的几何特性的函数。如果投影中心是投影仪的光学中心,并且计算出了投影锥体与屏幕表面间的交叉点,则所述畸变可由单位方形的三维投影完全确定。
为了将投影图像投射到投影屏幕7上尽可能大的区域,投影仪的视场(FOV)被调整到最大,相当于选择了投影仪的最小焦距。此时,投影图像是投影仪视场、屏幕全域座标以及投影仪参考轴间的角度的函数。代表投影仪位移的坐标变换可用Rp(α)表示,其绕轴p转动的角度为角α。因此,变换矩阵可用惯常的均匀座标表示如下:
R z ( ψ ) = 1 0 0 0 0 cos ( ψ ) - sin ( ψ ) 0 0 sin ( ψ ) cos ( ψ ) 0 0 0 0 1 , R x ( θ ) = cos ( θ ) 0 sin ( θ ) 0 0 1 0 0 - sin ( θ ) 0 cos ( θ ) 0 0 0 0 1 , - - - ( 1 )
其中是泛角,它是投影仪与垂直轴Y-轴之间的逆时针夹角;θ是倾斜角,它是投影仪与水平轴X-轴之间的正向夹角,ψ为绕Z-轴的转动角。
图6示出了一个投影仪***的简单模型,其中,z轴与投影仪5的光轴成一条直线,所述z轴同时处于投影屏幕7的法向。这是一个理想的投影实例,或者说理想的投影屏幕,其中像点p的投影q无任何畸变。投射出的像点p仅存在一个比例因数,它是屏幕与投影仪间距离的函数:
u = x w + f f
v = y w + f f - - - ( 2 )
                  w=w
如图6所示,焦距f是投影中心与图像平面之间的距离,而不等于0的s是由均匀座标引入的任意比例因数。同样地,w是图像平面与投影屏幕平面间的距离。均匀座标允许由线形矩阵进行的非线形处理表示法。在均匀座标中的像点p及投影像点q定义如下:
              q=(u,v,w,s)t p = ( x , y , z , 1 ) t P = 1 0 0 0 0 1 0 0 0 0 1 0 0 1 / f 0 1 - - - ( 3 )
              q=Pp
其中,同样地,f是指投影中心与图像平面间的距离。
请参照图7,其中示出了投影***的一个模型,该图示出了具有一投影中心的投影仪5,以及在屏幕参考座标中以一定角度Ψ、θ及φ(即几何参数)旋转的投影屏幕7。也可以将投影仪5看作可以转动的,而投影屏幕7是固定的。投射的点q(u,v,w)位于屏幕上且具有以下关系:
        q=PRy()Rx(θ)Rz(Ψ)P             (4)
Figure A0281573800132
从图7中可以看出,正方形被投影成了一般的四边形。
请参照图8,示出了正方形投射到投影屏幕7的投射区域Q的屏幕图。投射区域Q是一般四边形,但若投影屏幕7与光轴正交且图像平面与投影屏幕平面平行,则投射区域也将为正方形。从后面的描述可知,矫正***10预处理原始图像,并利用扭曲技术使投射图像在投影屏幕7显示为正方形。
正方形的投影在矫正后,必须是一个与显示设备的高宽比相匹配的矩形。为优化投影屏幕的实际状态矢量空间的使用,必须在四边形内确定一个定义为最佳可视区域(BVA)的最大矩形。最佳可视区域是面积最大的矩形区域,或者在投射的四边形内具有最高的空间分辨率以及理想的高宽比。在本实施例中,最佳可视区域是指最大面积区域。由于输入图像的高宽比是可调整的,因此矫正***10利用投射四边形的拉长形状以寻找具有适合所述拉长形状的理想高宽比的最大图像。例如,该方案可提供一个由高宽比为4∶3的显示设备形成的16∶9的宽屏图像。
为了简化计算,假设具有最大面积的最佳可视区域近似于具有最大周长的矩形。从而,若最大可视区域的顶点为(x1,y1),(x2,y1),(x2,y2)及(x1,y2),则可通过解下面的方程式(6)来确定:
最大化(x2-x1)+(y2-y1)周长
并使之满足:
Figure A0281573800141
其中,Q为四边形,其顶点为(uk,vk),k=1,…,4的。
等式(6)可由线性优化技术,例如授权给布莱洛克(Blalock)等人的美国专利U.S.5,465,121中提到的单一法解决,本发明中以该专利作为参考。
图9A及图9B示出了图8中最佳可视区域被重新调整尺寸后以利用屏幕上尽可能大的区域的情况。使用投影仪5的缩放功能可实现上述步骤。图9A示出了输入图像与投影仪5具有相同的高宽比时的情况,而图9B则示出了将16∶9的宽屏输入图像显示于高宽比为4∶3的显示设备(如电视屏幕)时的情况。
图10A,图10B及图10C示出了应用本发明的方案在一个特定投射区域Q内获得一个优化的最佳可视区域时的情况。矫正***10利用投射区域Q的拉长的畸变形状确定一个与宽屏高宽比对应的最佳可视区域。通过该方式,可通过并不昂贵的普通4∶3显示设备获得一节省成本的宽屏输入影像的投影。如图10A所示,当16∶9的影像显示于高宽比为4∶3的设备上时,将损失某些显示区域以避免显示梯形畸变。如图10B所示,利用4∶3的投影仪投射如图10A所示图像的离轴投影时,将导致高宽比为4∶3的最佳可视区域内的屏幕区域损失。如图10C所示,当考虑到输入图像的高宽比与显示设备的高宽比而对最佳可视区域进行优化时,将获得更大更好的投射图像。
图11A至图11D示出了与图10的投影及高宽比变换对应的合成扭曲栅格。图11A和图11C示出了通过与输入图像有相同高宽比的投影仪离轴投射的输入图像。图11A和图11C示出了用4∶3的投影仪离轴投射的宽屏图像(16∶9)。从图11B和图11D可清楚看出,当引入了高宽比变换后,屏幕的使用进一步优化了。
图12是本发明的矫正方法50的主要处理步骤流程图。在步骤(52)中,从前述的投影仪方位探测器18和/或使用者获得投影参数,也就是焦距f,以及一系列与屏幕7的角位移相关的角度Ψ、θ和。在步骤(54)中,选择一组特定的角度组合(也就是角度Ψ、θ及的一个组合)。
在步骤(56)中,确定与上述投影参数对应的扭曲多项式。最佳可视区域的顶点与投射四边形Q的对应顶点之间的变换定义了相应的映射,以用于特征化因投影到非理想屏幕上而引起的畸变。上述变换在数学上是一个透视变换,其定义如下:
u = U ( x , y ) = a 1 x + a 2 y + a 3 a 7 x + a 8 y + 1 - - - ( 7 )
v = V ( x , y ) = a 4 x + a 5 y + a 6 a 7 x + a 1 y + 1
等式(7)中的八个未知参数ai,j=1…8,可通过将投射四边形的顶点(u1,v1),(u2,v2),(u3,v3),(u4,v4)与图8中最佳可视区域的对应顶点(x1,y1),(x2,y1),(x2,y2),(x1,y2)匹配,解方程式(7)而获得。计算的详细过程请参见在美国专利U.S.5,465,121。从而,等式(7)定义了当输入图片投射时对其产生影响的畸变。正如通常所知,图像扭曲是指一个将第一图像平面的所有位置映射到第二图像平面的对应位置时的变换。等式(7)是输入图像的一个非线形采样,通过在投射前引入等式(7)的反向变换,还可对其进行补偿,也就是:
x = X ( u , v ) = b 1 u + b 2 v + b 3 b 7 u + b 8 v + 1 - - - ( 8 )
y = Y ( u , v ) = b 4 u + b 5 v + b 6 b 7 u + b 8 v + 1
通过用矩阵形式来表示所述变换并计算该反向逆矩阵,可由前述正向变换等式(7)取得反向变换等式(8)的系数。等式(7)和(8)可写为以下均匀座标的形式:
A = a 1 a 2 a 3 a 4 a 5 a 6 a 7 a 8 1 ; B = b 1 b 2 b 3 b 4 b 5 b 6 b 7 b 8 1
       (uvs)t=A(xyr)t;and(xyr)t=B(uvs)t
其中,s和r为比例因数。矩阵B是利用A矩阵的伴随矩阵和行列式对矩阵A进行翻转而获得的:B=adj(A)/det(A)。
在一个在此描述且实施于美国加州的硅光学公司(Silicon Optix Inc.)生产的svW1集成电路产品的实施例中,并参考2001年7月18日‘GEM产品摘要’(GEM Product Brief),‘几何控制器参考设计’(Geometry ManipulatorReference Design),等式(8)作为两个独立的变换按两个步骤应用于输入图像。由于二维处理被分解为两个沿着正交的轴(行和列)进行一维重采样,可分离的变换可获得更高效的存储器访问和重新采样,从而可简化硬件的执行。但是,可以理解的是,等式(8)也可用于非分离的方式。
在步骤(58)中,对分解的二维图像进行第一步处理变换。在第一步处理中,每一垂直列根据空间变换Y(u,v)重新采样,同时生成一个中间图像I(u,v):
[ u , v ] → γ ( u , v ) [ u , y ]
[ u , y ] = [ u , I ( u , y ) = b 4 u + b 5 v + b 6 b 7 u + b 8 v + 1 ] - - - ( 9 )
在步骤(60)中,对分解的二维图像作第二步变换处理。将中间图像I(u,v)用空间座标[u,y]表示,其中y是最终的垂直方向。但等式(8)可能的变换是[u,v]的函数,而不是[u,y]的函数。为查找I(u,v)的重新采样,需将X(u,v)表示为[u,y]的形式。通过对等式(7)中的变量进行替换,可单独表示为:
X ′ ( u , y ) = c 1 yu + c 2 y + c 3 u + c 4 c 5 y + c 6
       c1=b2b7-b1b8
       c2=b1b5-b2b4
       c3=b2-b3b8
                                            (10)
       c4=b3b5-b2b6
       c5=b5b7-b4b8
       c6=b5-b6b8
在第二步处理中,I(u,y)中的每一水平线根据空间变换X’(u,y)=X(u,Y(u,v))被重新采样
[ u , y ] → x ( u , y ) [ x , y ] - - - ( 11 )
本实施例使用等式(8)到(11)的多项式近似法。此类多项式参数化提供了极大的弹性,简化了与其他类型畸变(如固有的投影仪畸变(镜头畸变))的合成。
应注意的是,第一步处理可通过位置多项式实现:
Y ( u , v ) = b 4 u + b 5 v + b 6 b 7 u + b 8 v + 1 ≡ p u ( v ) = Σ k = 0 d β k v k - - - ( 12 )
此外,第二步处理也可通过位置多项式实现:
X ′ ( u , y ) = c 1 yu + c 2 y + c 3 u + c 4 c 5 y + c 6 ≅ q y ( u ) = Σ k = 0 d γ k u k - - - ( 13 )
应注意的是,由于允许连接用于补偿其他梯形畸变(如镜头畸变)的空间变换,由多项式(12)和(13)生成的近似值提供了更多的弹性。相反,获取描述畸变的参数的过程,与低成本投影仪类似,等式(4)到等式(13)涉及实时嵌入设备的昂贵的计算成本。
在步骤(56)中,计算了等式(12)和(13)的参数的所有投影几何参数值。可以理解的是,位置多项式的等式(12)和(13)中的每一系数βi,γj是图像和投影角参数中的空间位置的函数。如此处描述的例子中,为了便于理解,使用的是角坐标。等式(12)和(13)中的多项式系数可写成:
      βufi=βi(θ,,ψ)
                                              (14)
      γyfj=γj(θ,,ψ)
其中,等式(14)表示由多项式近似法近似形成的三维表面:
其中,Tk(x)是作为一个给定多项式基础的变量x的k阶多项式。推荐使用B样条函数(B-splines)或车比雪夫函数(Chebychev)。在讨论的例子中,Tk(x)是第一类k阶的车比雪夫多项式。为了使表述清楚,等式(15)中的例子限制在三个变量,但可以认为矫正方法50可采用多于或少于三个变量的任意维数。
在步骤(58)和(60)中,将多项式(15)存储于计算机的存储器64中。该多项式必须被有效访问和计算,以使dp≤3的低阶多项式曲面符合系数βufi和γyfj的设置。这些设置变换系数(14)的曲面提供有畸变的解析表达,并允许未用等式(15)进行插值定义的角度对其进行扭曲。
图13是用于示出图12中描述的步骤之后的主要处理步骤的流程图。特别地,用在步骤(58)和(60)中预计算生成的预计算曲面(15)动态查询由插值法确定的参数的畸变。该处理也提供有效的几何数据压缩,以减少用于表达所有可能的畸变的计算机存储器,这也是嵌入式操作的突出优点,所述嵌入式操作的存储器和计算资源通常非常有限。
在步骤(102)中,从存储器64中重新获取系数组。在步骤(104)中,将系数空间分割为一系列的基本曲面。在步骤(108)中,合并最相近的两个基本曲面,然后在步骤(108)中判断是否合并成功。如果合并成功,则在步骤(109)中将合并后的曲面S添加到基本曲面系列中。如果不成功,则步骤(110)判断是否存在其他合并,如果存在,则返回步骤(106);如果不存在,则进入步骤(112),增加适配度。然后在步骤(114)判断多项式的适配度是否小于使用者设置的最大适配度。如果小于最大适配度,则重复步骤(106)。如果不小于最大适配度,则进入步骤(118),将多项式系数表面保存到存储器64中。
图14是当将输入正方形栅格投射到投影屏幕时呈现畸变的示意图,上述畸变是由于轴位移造成。图14B为图14A中的输入图像。图14C和图14D是图14B所示的输入图像经第一和第二步处理预畸变后的示意图,所述预畸变用以补偿投射时的畸变,当图14B所示的图像经过该预畸变后再投射时,将显示无畸变的投影图像。
在实际投影状态中,几何畸变现象并非投影仪5所固有,而是更多地与位置(旋转角,距离)资料相关。对于最精确的畸变矫正,需考虑投影***的内部参数,特别是镜头畸变(径向和切向)。显然,等式(15)揭示的方法足以处理该类问题。即该获取扭曲多项式的方法足以使本领域的技术人员推知畸变的其他参数(如桶形或枕形镜头畸变)。对由于如图15A和15B所示的投影仪内部参数造成畸变的图像,应用等式(6)可实现畸变叠加。投影仪内部畸变可由制造商提供,或通过校正处理来确定。
因此,矫正***10及矫正方法50和100调整了通常投影中将源图像投射到屏幕上时产生的变形,上述变形是在投影屏幕的表面与投影仪镜头的对称轴不垂直的情况下将源图像投射在投影屏幕上时所造成的。特别地,将几何参数提供给扭曲工具以矫正投影中的复杂畸变。为获取无畸变的投射图像,需通过扭曲工具将源图像进行相反步处理的预畸变以补偿实际畸变。
可以理解的是,虽然本发明是通过投射图像、投影仪、及投影***来描述的,但本发明可同样适用于将一角度/位置的图像变换为另一角度/位置的图像。同样地,当照相机或录像机与图像处理离轴状态时,如果用照相机或录像机观看图像,也会出现与投影例子中描述的畸变相同情况。这样,从一个角度的摄取图像必须先被畸变或扭曲以在另一个角度进行显示。
对本领域的技术人员来说,在不背离本发明的权利要求所限定的范围内对上述结构进行各种变动和调整都是可能的。

Claims (12)

1、一种矫正投影图像畸变的方法,所述畸变是由一个投影仪镜头将一个输入图像投射到与投影仪的投影轴不正交的一个投影屏幕上时所造成的,所述投影屏幕与一个显示设备联接,其特征在于,所述方法包括以下步骤:
(a)接收投影参数,所述投影参数包括投影仪镜头焦距,与显示设备的高宽比相关的输入图像的高宽比,以及代表投影仪的泛角、倾斜角和倾侧角的角度值;
(b)确定根据步骤(a)给出的投影参数形成的畸变的投影区域,然后确定适合于所述投影区域内部的最佳可视矩形区域的顶点,以使所述最佳可视矩形区域的周长达到最大值;
(c)通过一个与存在于最佳可视矩形区域的顶点和投影区域的对应顶点之间的变换对应的畸变变换,特征化由投影引起的畸变;
(d)翻转所述畸变变换,以形成一个预畸变图像变换;
(e)将所述预畸变图像变换施加到所述输入图像,以获得一个无畸变的投影图像。
2、根据权利要求1所述的方法,其特征在于,所述步骤(e)中包括将所述预畸变图像变换作为一个二维图像变换来施加的步骤。
3、根据权利要求1所述的方法,其特征在于,所述步骤(e)中包括将预畸变图像变换作为两个分离的一维图像变换来施加的步骤。
4、根据权利要求3所述的方法,其特征在于,所述步骤(e)中包括以下步骤:
(i)将所述预畸变图像变换拆分为第一步变换和第二步变换;
(ii)用第一位置多项式处理第一步变换;
(iii)用第二位置多项式处理第二步变换。
5、根据权利要求1所述的方法,其特征在于,所述步骤(a)中包括接收一系列角度设置作为投影参数的步骤,其中每一角度设置包括代表投影仪镜头的泛角、倾斜角及倾侧角的角度参数;在步骤(b)到步骤(d)中,用每一角度设置进行计算,以动态获取每一特定角度设置的预畸变图像变换,并将其施加于输入图像。
6、根据权利要求1所述的方法,其特征在于,所述方法通过执行步骤(b)完成对另一畸变的矫正,从而使所述畸变图像成为包含另一畸变的投射图像。
7、一种矫正投影图像畸变的***,所述畸变是由一个投影仪镜头将一个输入图像投射到与投影仪的投影轴不正交的一个投影屏幕上时所造成的,所述投影屏幕与一个显示设备联接,其特征在于,所述***包括:
(a)一个用于存储投影参数的存储器,所述投影参数包括投影仪镜头焦距,与显示设备的高宽比相关的输入图像的高宽比,以及代表投影仪的泛角、倾斜角和倾侧角的角度值;
(b)一个与所述存储器连接的处理器,所述处理器用于确定根据步骤(a)给出的投影参数形成的畸变的投影区域,然后确定适合于所述投影区域内部的最佳可视矩形区域的顶点,以使所述最佳可视矩形区域的周长达到最大值;
(c)所述处理器也用于通过一个与存在于最佳可视矩形区域的顶点和投影区域的对应顶点之间的变换对应的畸变变换,特征化由投影引起的畸变;
(d)所述处理器还用于翻转所述畸变变换,以形成一个预畸变图像变换;
(e)所述处理器还用于将所述预畸变图像变换施加到所述输入图像,以获得一个无畸变的投影图像。
8、根据权利要求7所述矫正多轴位移畸变的***,其特征在于,所述处理器还用于将所述预畸变图像变换作为一个二维图像变换来施加。
9、根据权利要求7所述矫正多轴位移畸变的***,其特征在于,所述处理器还用于将预畸变图像变换作为两个分离的一维图像变换来施加。
10、根据权利要求9所述矫正多轴位移畸变的***,其特征在于,其中:
(i)所述处理器还用于将所述预畸变图像变换拆分为第一步变换和第二步变换;
(ii)所述处理器还用于用第一位置多项式处理第一步变换;
(iii)所述处理器还用于用第二位置多项式处理第二步变换。
11、根据权利要求7所述矫正多轴位移畸变的***,其特征在于,其中所述处理器还用于接收一系列角度设置作为投影参数,其中每一角度设置包括代表投影仪镜头的泛角、倾斜角及倾侧角的角度参数;其中所述处理器还用于对用每一角度设置进行计算,以动态获取每一特定角度设置的预畸变图像变换,并将其施加于输入图像。
12、根据权利要求7所述矫正多轴位移畸变的***,其特征在于,所述处理器通过确定投影区域而完成对另一畸变的矫正,其中的投影区域是由给定的投影参数代表的畸变和所述另一畸变所生成的;然后确定适合于所述投影区域内部的最佳可视矩形区域的顶点,以使所述最佳可视矩形区域的周长达到最大值。
CNB028157389A 2001-06-12 2002-06-12 一种将图像投射到屏幕表面的方法及*** Expired - Lifetime CN100465995C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US29724101P 2001-06-12 2001-06-12
US60/297,241 2001-06-12

Publications (2)

Publication Number Publication Date
CN1582459A true CN1582459A (zh) 2005-02-16
CN100465995C CN100465995C (zh) 2009-03-04

Family

ID=23145456

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB028157389A Expired - Lifetime CN100465995C (zh) 2001-06-12 2002-06-12 一种将图像投射到屏幕表面的方法及***

Country Status (5)

Country Link
US (1) US7352913B2 (zh)
EP (1) EP1395865A2 (zh)
CN (1) CN100465995C (zh)
AU (1) AU2002312676A1 (zh)
WO (1) WO2002101443A2 (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156969A (zh) * 2011-04-12 2011-08-17 潘林岭 图像纠偏处理方法
CN103716602A (zh) * 2013-12-24 2014-04-09 北京淳中视讯科技有限公司 投影图像的几何校正方法、装置及***
CN103792674A (zh) * 2014-01-21 2014-05-14 浙江大学 一种测量和校正虚拟现实显示器畸变的装置和方法
CN103974048A (zh) * 2014-04-28 2014-08-06 京东方科技集团股份有限公司 控制可穿戴设备投影的方法及装置、可穿戴设备
CN104062831A (zh) * 2013-03-22 2014-09-24 卡西欧计算机株式会社 投影装置以及投影方法
CN105227948A (zh) * 2015-09-18 2016-01-06 广东欧珀移动通信有限公司 一种查找图像中畸变区域的方法及装置
CN106507077A (zh) * 2016-11-28 2017-03-15 江苏鸿信***集成有限公司 基于图像分析的投影仪画面矫正及遮挡避让方法
CN107046636A (zh) * 2017-02-22 2017-08-15 青岛海信宽带多媒体技术有限公司 投影设备的图像矫正方法及装置
CN108200417A (zh) * 2017-12-30 2018-06-22 神画科技(深圳)有限公司 一种在投影单元梯形校正中获取最大矩形投影图像的方法
WO2018120011A1 (zh) * 2016-12-30 2018-07-05 深圳前海达闼云端智能科技有限公司 投影图像校正方法、校正装置及机器人
CN108377371A (zh) * 2018-02-09 2018-08-07 深圳市火乐科技发展有限公司 一种投影图像校正的方法及装置
CN108780572A (zh) * 2017-02-22 2018-11-09 华为技术有限公司 图像校正的方法及装置
CN108907470A (zh) * 2018-07-25 2018-11-30 上海恺杰汽车塑料零部件有限公司 一种整体镭雕工艺
CN109089093A (zh) * 2018-08-29 2018-12-25 歌尔股份有限公司 图像处理方法、装置和设备
CN109697747A (zh) * 2018-12-24 2019-04-30 大陆汽车车身电子***(芜湖)有限公司 矩形翻转动画生成方法及装置
CN109963145A (zh) * 2017-12-25 2019-07-02 广东虚拟现实科技有限公司 视觉显示***及方法,以及头戴显示装置
CN110363721A (zh) * 2019-07-10 2019-10-22 成都极米科技股份有限公司 目标区域信息生成方法、目标图案处理方法及***
CN112672127A (zh) * 2020-12-29 2021-04-16 视田科技(天津)有限公司 一种投影反射画面自动校准方法
CN112818991A (zh) * 2021-02-18 2021-05-18 长江存储科技有限责任公司 图像处理方法及图像处理装置、电子设备、可读存储介质
CN113239918A (zh) * 2021-07-13 2021-08-10 北京金博星指纹识别科技有限公司 一种图像分辨率归一化处理方法及装置
CN113286132A (zh) * 2020-01-31 2021-08-20 精工爱普生株式会社 图像投射***的控制方法和图像投射***

Families Citing this family (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7239755B1 (en) * 1997-07-30 2007-07-03 Lg Electronics Inc. Method of reducing a blocking artifact when coding moving picture
KR100244290B1 (ko) 1997-09-09 2000-02-01 구자홍 저속 전송에서의 동영상을 위한 디블록킹 필터링 방법
US6741868B1 (en) * 1999-07-30 2004-05-25 Curitell Communications Inc. Method and apparatus for interfacing among mobile terminal, base station and core network in mobile telecommunications system
US20040189804A1 (en) * 2000-02-16 2004-09-30 Borden George R. Method of selecting targets and generating feedback in object tracking systems
US7301564B2 (en) * 2002-07-17 2007-11-27 Hewlett-Packard Development Company, L.P. Systems and methods for processing a digital captured image
US7215362B2 (en) * 2002-10-31 2007-05-08 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Auto-calibration of multi-projector systems
JP3844075B2 (ja) 2003-01-17 2006-11-08 セイコーエプソン株式会社 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP3844076B2 (ja) * 2003-03-07 2006-11-08 セイコーエプソン株式会社 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP2005006228A (ja) 2003-06-13 2005-01-06 Casio Comput Co Ltd プロジェクタ
JP3846592B2 (ja) 2003-06-26 2006-11-15 セイコーエプソン株式会社 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP4155890B2 (ja) 2003-07-15 2008-09-24 カシオ計算機株式会社 プロジェクタ、プロジェクタの傾斜角度取得方法及び投影像補正方法
US7175285B2 (en) * 2003-07-29 2007-02-13 Sharp Laboratories Of America, Inc. Projection system that adjusts for keystoning
JP3969363B2 (ja) 2003-07-30 2007-09-05 カシオ計算機株式会社 プロジェクタ及びプロジェクタの投影像補正方法
EP1503333A1 (en) * 2003-08-01 2005-02-02 Sony International (Europe) GmbH Correction of non-uniform image display
US7150536B2 (en) * 2003-08-08 2006-12-19 Casio Computer Co., Ltd. Projector and projection image correction method thereof
JP2005122323A (ja) * 2003-10-14 2005-05-12 Casio Comput Co Ltd 撮影装置、画像処理装置、撮影装置の画像処理方法及びプログラム
US7125122B2 (en) * 2004-02-02 2006-10-24 Sharp Laboratories Of America, Inc. Projection system with corrective image transformation
JP2005223393A (ja) 2004-02-03 2005-08-18 Casio Comput Co Ltd 投影装置、投影方法、及び投影プログラム
JP4006601B2 (ja) * 2004-03-29 2007-11-14 セイコーエプソン株式会社 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
US7144115B2 (en) 2004-04-14 2006-12-05 Sharp Laboratories Of America, Inc. Projection system
US7226167B2 (en) * 2004-05-25 2007-06-05 Eastman Kodak Company Autostereoscopic display apparatus
JP3722146B1 (ja) 2004-06-16 2005-11-30 セイコーエプソン株式会社 プロジェクタおよび画像補正方法
DE102004044004A1 (de) * 2004-09-09 2006-03-30 Hüwel, Jan Bildbearbeitungsverfahren sowie Bildbearbeitungseinrichtung
US7399086B2 (en) 2004-09-09 2008-07-15 Jan Huewel Image processing method and image processing device
CN101027679B (zh) * 2004-09-09 2010-04-21 奥普提克斯晶硅有限公司 表达通用的二维空间变换的***和方法
JP4232042B2 (ja) * 2005-01-07 2009-03-04 セイコーエプソン株式会社 投写制御システム、プロジェクタ、プログラム、情報記憶媒体および投写制御方法
JP4085283B2 (ja) * 2005-02-14 2008-05-14 セイコーエプソン株式会社 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
WO2006090386A2 (en) * 2005-02-24 2006-08-31 Vkb Inc. A virtual keyboard device
EP1742459A1 (en) * 2005-06-13 2007-01-10 SONY DEUTSCHLAND GmbH Method for geometry distorsion correction
US8089567B2 (en) * 2005-07-29 2012-01-03 Optoma Technology, Inc. Methods and systems for displaying video on an adjustable screen
US20070030452A1 (en) * 2005-08-08 2007-02-08 N-Lighten Technologies Image adaptation system and method
US20070058881A1 (en) * 2005-09-12 2007-03-15 Nishimura Ken A Image capture using a fiducial reference pattern
US8332144B2 (en) * 2005-12-31 2012-12-11 Alpine Electronics, Inc Image correction method and apparatus for navigation system with portable navigation unit
JP4104631B2 (ja) * 2006-03-27 2008-06-18 三洋電機株式会社 運転支援装置
DE102006046367B4 (de) * 2006-09-29 2020-08-20 Carl Zeiss Ag Abbildungsvorrichtung und Abbildungsverfahren mit elektronischer Verzeichnungskorrektur
US9349153B2 (en) * 2007-04-25 2016-05-24 Digimarc Corporation Correcting image capture distortion
US8159615B2 (en) * 2007-07-25 2012-04-17 Sigma Designs, Inc. System and method of geometrical predistortion of overlaying graphics sources
JP2009200557A (ja) * 2008-02-19 2009-09-03 Seiko Epson Corp プロジェクタ、電子機器、および、プロジェクタの制御方法
US8405727B2 (en) * 2008-05-01 2013-03-26 Apple Inc. Apparatus and method for calibrating image capture devices
GB2461912A (en) * 2008-07-17 2010-01-20 Micron Technology Inc Method and apparatus for dewarping and/or perspective correction of an image
US8508671B2 (en) * 2008-09-08 2013-08-13 Apple Inc. Projection systems and methods
US8538084B2 (en) * 2008-09-08 2013-09-17 Apple Inc. Method and apparatus for depth sensing keystoning
US8610726B2 (en) * 2008-09-26 2013-12-17 Apple Inc. Computer systems and methods with projected display
US20100079653A1 (en) * 2008-09-26 2010-04-01 Apple Inc. Portable computing system with a secondary image output
US8527908B2 (en) * 2008-09-26 2013-09-03 Apple Inc. Computer user interface system and methods
US20100079426A1 (en) * 2008-09-26 2010-04-01 Apple Inc. Spatial ambient light profiling
US7881603B2 (en) * 2008-09-26 2011-02-01 Apple Inc. Dichroic aperture for electronic imaging device
GB2466497B (en) 2008-12-24 2011-09-14 Light Blue Optics Ltd Touch sensitive holographic displays
US8265422B1 (en) * 2009-02-20 2012-09-11 Adobe Systems Incorporated Method and apparatus for removing general lens distortion from images
US8393740B2 (en) * 2009-03-12 2013-03-12 Canon Kabushiki Kaisha Image projection system with keystone correction
US7901095B2 (en) * 2009-03-27 2011-03-08 Seiko Epson Corporation Resolution scalable view projection
JP5881601B2 (ja) * 2009-07-02 2016-03-09 トムソン ライセンシングThomson Licensing 3次元(3d)映写のための微分歪み補正方法及びシステム
CA2768701A1 (en) * 2009-07-29 2011-02-03 Thomson Licensing Method for crosstalk correction for three-dimensional (3d) projection
EP2465269A1 (en) * 2009-08-12 2012-06-20 Thomson Licensing Method and system for crosstalk and distortion corrections for three-dimensional (3d) projection
US20110055703A1 (en) * 2009-09-03 2011-03-03 Niklas Lundback Spatial Apportioning of Audio in a Large Scale Multi-User, Multi-Touch System
US8502926B2 (en) 2009-09-30 2013-08-06 Apple Inc. Display system having coherent and incoherent light sources
US8619128B2 (en) * 2009-09-30 2013-12-31 Apple Inc. Systems and methods for an imaging system using multiple image sensors
US8687070B2 (en) 2009-12-22 2014-04-01 Apple Inc. Image capture device having tilt and/or perspective correction
TWI439788B (zh) * 2010-01-04 2014-06-01 Ind Tech Res Inst 投影校正系統及方法
US8497897B2 (en) 2010-08-17 2013-07-30 Apple Inc. Image capture using luminance and chrominance sensors
JP5541031B2 (ja) 2010-09-16 2014-07-09 セイコーエプソン株式会社 プロジェクター、およびプロジェクターの制御方法
US8538132B2 (en) 2010-09-24 2013-09-17 Apple Inc. Component concentricity
US8480238B2 (en) * 2010-10-26 2013-07-09 Canon Kabushiki Kaisha Projector array for multiple images
JP5803184B2 (ja) * 2010-11-19 2015-11-04 株式会社リコー 画像投影装置、メモリアクセス方法
EP2720114A4 (en) * 2011-06-13 2015-02-25 Citizen Holdings Co Ltd INFORMATION INPUT DEVICE
GB201110159D0 (en) 2011-06-16 2011-07-27 Light Blue Optics Ltd Touch sensitive display devices
GB201110156D0 (en) 2011-06-16 2011-07-27 Light Blue Optics Ltd Touch-sensitive display devices
GB201110157D0 (en) 2011-06-16 2011-07-27 Light Blue Optics Ltd Touch sensitive display devices
GB201117542D0 (en) 2011-10-11 2011-11-23 Light Blue Optics Ltd Touch-sensitive display devices
GB2497936B (en) * 2011-12-22 2015-04-08 Canon Kk Method and device for controlling a video projector in a video projection system comprising multiple video projectors
GB2513498A (en) 2012-01-20 2014-10-29 Light Blue Optics Ltd Touch sensitive image display devices
WO2013108032A1 (en) 2012-01-20 2013-07-25 Light Blue Optics Limited Touch sensitive image display devices
JP5924020B2 (ja) * 2012-02-16 2016-05-25 セイコーエプソン株式会社 プロジェクター、及び、プロジェクターの制御方法
GB201205303D0 (en) 2012-03-26 2012-05-09 Light Blue Optics Ltd Touch sensing systems
EP2842121B1 (en) * 2012-04-24 2020-05-27 Hewlett-Packard Development Company, L.P. System for displaying an image
CN103634544B (zh) * 2012-08-20 2019-03-29 联想(北京)有限公司 一种投影方法及电子设备
EP2706508B1 (en) * 2012-09-10 2019-08-28 BlackBerry Limited Reducing latency in an augmented-reality display
US9576397B2 (en) 2012-09-10 2017-02-21 Blackberry Limited Reducing latency in an augmented-reality display
CN102970495B (zh) * 2012-11-23 2014-11-19 华为技术有限公司 一种透镜畸变校正方法和装置
US9459705B2 (en) 2013-03-18 2016-10-04 Facebook, Inc. Tilting to scroll
JP6244638B2 (ja) * 2013-03-22 2017-12-13 カシオ計算機株式会社 投影装置、投影方法及び投影プログラム
US9531992B2 (en) * 2013-03-26 2016-12-27 Sharp Kabushiki Kaisha Display apparatus, portable terminal, television receiver, display method, program, and recording medium
CN103353667B (zh) 2013-06-28 2015-10-21 北京智谷睿拓技术服务有限公司 成像调整设备及方法
CN103353677B (zh) 2013-06-28 2015-03-11 北京智谷睿拓技术服务有限公司 成像装置及方法
CN103353663B (zh) * 2013-06-28 2016-08-10 北京智谷睿拓技术服务有限公司 成像调整装置及方法
CN103424891B (zh) 2013-07-31 2014-12-17 北京智谷睿拓技术服务有限公司 成像装置及方法
CN103431840B (zh) 2013-07-31 2016-01-20 北京智谷睿拓技术服务有限公司 眼睛光学参数检测***及方法
US9356061B2 (en) 2013-08-05 2016-05-31 Apple Inc. Image sensor with buried light shield and vertical gate
CN103431980A (zh) 2013-08-22 2013-12-11 北京智谷睿拓技术服务有限公司 视力保护成像***及方法
CN103439801B (zh) 2013-08-22 2016-10-26 北京智谷睿拓技术服务有限公司 视力保护成像装置及方法
CN103605208B (zh) 2013-08-30 2016-09-28 北京智谷睿拓技术服务有限公司 内容投射***及方法
CN103500331B (zh) 2013-08-30 2017-11-10 北京智谷睿拓技术服务有限公司 提醒方法及装置
US9423941B2 (en) * 2013-09-05 2016-08-23 Facebook, Inc. Tilting to scroll
US11606538B2 (en) * 2013-09-05 2023-03-14 Texas Instmments Incorporated Automatic keystone correction in a projection system
TWI497448B (zh) * 2013-09-26 2015-08-21 Univ Nat Taiwan Science Tech 影像強化方法及其系統
CN103558909B (zh) 2013-10-10 2017-03-29 北京智谷睿拓技术服务有限公司 交互投射显示方法及交互投射显示***
US10147155B2 (en) * 2014-11-26 2018-12-04 Visual Supply Company Image perspective processing
TWI584648B (zh) * 2015-08-24 2017-05-21 鈺立微電子股份有限公司 具有校正功能的影像擷取裝置與影像擷取裝置的校正方法
US20170178288A1 (en) * 2015-12-21 2017-06-22 Stanislaw Adaszewski Two-dimensional piecewise approximation to compress image warping fields
US9792674B2 (en) * 2016-03-10 2017-10-17 Netflix, Inc. Perspective correction for curved display screens
JP6685843B2 (ja) * 2016-06-06 2020-04-22 オリンパス株式会社 撮像装置
US11153539B2 (en) * 2019-06-20 2021-10-19 Google Llc Methods and systems to pre-warp and image
US11677921B2 (en) * 2021-01-02 2023-06-13 Dreamvu Inc. System and method for generating dewarped image using projection patterns captured from omni-directional stereo cameras
CN114845091B (zh) * 2021-02-01 2023-11-10 扬智科技股份有限公司 投影装置与其梯形校正方法
US11927757B1 (en) * 2021-10-29 2024-03-12 Apple Inc. Electronic device display having distortion compensation

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US130669A (en) * 1872-08-20 Improvement in trussing-machines
US156558A (en) * 1874-11-03 Improvement in machines for cutting and pressing bungs
US5175808A (en) * 1989-09-12 1992-12-29 Pixar Method and apparatus for non-affine image warping
US5465121A (en) * 1993-03-31 1995-11-07 International Business Machines Corporation Method and system for compensating for image distortion caused by off-axis image projection
NO942080D0 (no) * 1994-06-03 1994-06-03 Int Digital Tech Inc Bildekoder
US5594676A (en) 1994-12-22 1997-01-14 Genesis Microchip Inc. Digital image warping system
EP0777198A1 (en) * 1995-11-30 1997-06-04 Victor Company Of Japan, Limited Image processing apparatus
JP3950188B2 (ja) * 1996-02-27 2007-07-25 株式会社リコー 画像歪み補正用パラメータ決定方法及び撮像装置
IL119259A (en) * 1996-09-17 2000-12-06 Comview Graphics Ltd Electro-optical display apparatus and method of using same
US6281931B1 (en) * 1997-11-04 2001-08-28 Tien Ren Tsao Method and apparatus for determining and correcting geometric distortions in electronic imaging systems
JP2000075854A (ja) * 1998-06-18 2000-03-14 Matsushita Electric Ind Co Ltd 画像処理装置、およびこれを用いたディスプレイ装置
US6456339B1 (en) * 1998-07-31 2002-09-24 Massachusetts Institute Of Technology Super-resolution display
US6367933B1 (en) * 1998-10-02 2002-04-09 Macronix International Co., Ltd. Method and apparatus for preventing keystone distortion
US6305805B1 (en) * 1998-12-17 2001-10-23 Gateway, Inc. System, method and software for correcting keystoning of a projected image
US6520646B2 (en) * 1999-03-03 2003-02-18 3M Innovative Properties Company Integrated front projection system with distortion correction and associated method
US6568814B2 (en) * 1999-03-03 2003-05-27 3M Innovative Properties Company Integrated front projection system with shaped imager and associated method
KR100414083B1 (ko) 1999-12-18 2004-01-07 엘지전자 주식회사 영상왜곡 보정방법 및 이를 이용한 영상표시기기
TW480362B (en) * 2000-09-14 2002-03-21 Delta Electronics Inc Automatic calibration method and device of the projector display
JP2004178123A (ja) 2002-11-26 2004-06-24 Hitachi Ltd 情報処理装置、該情報処理装置を実現するためのプログラム
US6839231B2 (en) 2003-01-07 2005-01-04 Vulcan Portals Inc. Heat dissipation from a hand-held portable computer

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156969B (zh) * 2011-04-12 2013-09-25 潘林岭 图像纠偏处理方法
CN102156969A (zh) * 2011-04-12 2011-08-17 潘林岭 图像纠偏处理方法
CN104062831B (zh) * 2013-03-22 2017-09-05 卡西欧计算机株式会社 投影装置以及投影方法
CN104062831A (zh) * 2013-03-22 2014-09-24 卡西欧计算机株式会社 投影装置以及投影方法
CN103716602A (zh) * 2013-12-24 2014-04-09 北京淳中视讯科技有限公司 投影图像的几何校正方法、装置及***
CN103792674A (zh) * 2014-01-21 2014-05-14 浙江大学 一种测量和校正虚拟现实显示器畸变的装置和方法
CN103792674B (zh) * 2014-01-21 2016-11-23 浙江大学 一种测量和校正虚拟现实显示器畸变的装置和方法
CN103974048A (zh) * 2014-04-28 2014-08-06 京东方科技集团股份有限公司 控制可穿戴设备投影的方法及装置、可穿戴设备
CN103974048B (zh) * 2014-04-28 2016-05-04 京东方科技集团股份有限公司 控制可穿戴设备投影的方法及装置、可穿戴设备
US9872002B2 (en) 2014-04-28 2018-01-16 Boe Technology Group Co., Ltd. Method and device for controlling projection of wearable apparatus, and wearable apparatus
CN105227948A (zh) * 2015-09-18 2016-01-06 广东欧珀移动通信有限公司 一种查找图像中畸变区域的方法及装置
CN106507077B (zh) * 2016-11-28 2018-07-24 江苏鸿信***集成有限公司 基于图像分析的投影仪画面矫正及遮挡避让方法
CN106507077A (zh) * 2016-11-28 2017-03-15 江苏鸿信***集成有限公司 基于图像分析的投影仪画面矫正及遮挡避让方法
WO2018120011A1 (zh) * 2016-12-30 2018-07-05 深圳前海达闼云端智能科技有限公司 投影图像校正方法、校正装置及机器人
CN107046636A (zh) * 2017-02-22 2017-08-15 青岛海信宽带多媒体技术有限公司 投影设备的图像矫正方法及装置
CN108780572A (zh) * 2017-02-22 2018-11-09 华为技术有限公司 图像校正的方法及装置
CN108780572B (zh) * 2017-02-22 2021-04-20 华为技术有限公司 图像校正的方法及装置
CN109963145A (zh) * 2017-12-25 2019-07-02 广东虚拟现实科技有限公司 视觉显示***及方法,以及头戴显示装置
CN109963145B (zh) * 2017-12-25 2024-04-26 广东虚拟现实科技有限公司 视觉显示***及方法,以及头戴显示装置
CN108200417A (zh) * 2017-12-30 2018-06-22 神画科技(深圳)有限公司 一种在投影单元梯形校正中获取最大矩形投影图像的方法
CN108377371A (zh) * 2018-02-09 2018-08-07 深圳市火乐科技发展有限公司 一种投影图像校正的方法及装置
CN108907470A (zh) * 2018-07-25 2018-11-30 上海恺杰汽车塑料零部件有限公司 一种整体镭雕工艺
CN109089093A (zh) * 2018-08-29 2018-12-25 歌尔股份有限公司 图像处理方法、装置和设备
CN109697747B (zh) * 2018-12-24 2023-08-08 大陆汽车车身电子***(芜湖)有限公司 矩形翻转动画生成方法及装置
CN109697747A (zh) * 2018-12-24 2019-04-30 大陆汽车车身电子***(芜湖)有限公司 矩形翻转动画生成方法及装置
CN110363721A (zh) * 2019-07-10 2019-10-22 成都极米科技股份有限公司 目标区域信息生成方法、目标图案处理方法及***
CN113286132A (zh) * 2020-01-31 2021-08-20 精工爱普生株式会社 图像投射***的控制方法和图像投射***
CN112672127A (zh) * 2020-12-29 2021-04-16 视田科技(天津)有限公司 一种投影反射画面自动校准方法
CN112818991A (zh) * 2021-02-18 2021-05-18 长江存储科技有限责任公司 图像处理方法及图像处理装置、电子设备、可读存储介质
CN112818991B (zh) * 2021-02-18 2024-04-09 长江存储科技有限责任公司 图像处理方法及图像处理装置、电子设备、可读存储介质
CN113239918A (zh) * 2021-07-13 2021-08-10 北京金博星指纹识别科技有限公司 一种图像分辨率归一化处理方法及装置

Also Published As

Publication number Publication date
AU2002312676A1 (en) 2002-12-23
US20030043303A1 (en) 2003-03-06
WO2002101443A3 (en) 2003-07-10
US7352913B2 (en) 2008-04-01
CN100465995C (zh) 2009-03-04
EP1395865A2 (en) 2004-03-10
WO2002101443A2 (en) 2002-12-19

Similar Documents

Publication Publication Date Title
CN1582459A (zh) 矫正梯形畸变的***及方法
CN1221129C (zh) 利用相机校准投影仪的方法
CN110197466B (zh) 一种广角鱼眼图像矫正方法
US7899270B2 (en) Method and apparatus for providing panoramic view with geometric correction
US7471849B2 (en) Methods and apparatus for shifting perspective in a composite image
US10684537B2 (en) Camera-assisted arbitrary surface characterization and correction
US6104840A (en) Method and system for generating a composite image from partially overlapping adjacent images taken along a plurality of axes
CN1278279C (zh) 全向视觉***和图像处理方法
CN1698358A (zh) 在显示表面上投影输出图像的装置
CN1698359A (zh) 由一组投影仪形成一个集群的方法
US20080204666A1 (en) Image projection and capture systems
US20080186415A1 (en) Curved screen display system and method
US6491400B1 (en) Correcting for keystone distortion in a digital image displayed by a digital projector
CN104778656B (zh) 基于球面透视投影的鱼眼图像校正方法
US20040136092A1 (en) Method for capturing and displaying a variable resolution digital panoramic image
US20190384056A1 (en) Method for correcting an image, storage medium and projection device
CN101065969A (zh) 摄像机的校正方法及摄像机的校正装置
CN1577102A (zh) 用于平板显示器的像差可校正大视场投影光学***
CN1878297A (zh) 全方位视觉装置
JP2004536351A (ja) 長方形の画像センサによりパノラマ画像を撮像する方法
CN1878241A (zh) 具有全景摄像功能的手机
CN1244237C (zh) 提供要在屏幕上显示的图像的方法和装置
CN1851752A (zh) 三维重构***中双摄像机标定方法
US6345129B1 (en) Wide-field scanning tv
CN108810499A (zh) 光纤扫描成像设备投影几何变形的校正***

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: GEO SEMICONDUCTOR CO., LTD.

Free format text: FORMER OWNER: SILICON OPTIX INC.

Effective date: 20100917

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: ONTARIO PROVINCE, CANADA TO: ROOM 1050, NO.2350, MISSION COLLEGE BLVD., SANTA CLARA, CALIFORNIA, USA

TR01 Transfer of patent right

Effective date of registration: 20100917

Address after: Room 2350, 1050th College Avenue, Santa Clara, California welfare Asia

Patentee after: Geo Semiconductor Inc.

Address before: Ontario, Canada

Patentee before: Silicon Optix Co., Ltd.

CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20090304