CN101656858B - 投影型显示装置及显示方法 - Google Patents

投影型显示装置及显示方法 Download PDF

Info

Publication number
CN101656858B
CN101656858B CN2009101654789A CN200910165478A CN101656858B CN 101656858 B CN101656858 B CN 101656858B CN 2009101654789 A CN2009101654789 A CN 2009101654789A CN 200910165478 A CN200910165478 A CN 200910165478A CN 101656858 B CN101656858 B CN 101656858B
Authority
CN
China
Prior art keywords
aforementioned
line segment
end point
completion
photographic images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2009101654789A
Other languages
English (en)
Other versions
CN101656858A (zh
Inventor
古井志纪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN101656858A publication Critical patent/CN101656858A/zh
Application granted granted Critical
Publication of CN101656858B publication Critical patent/CN101656858B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3185Geometric adjustment, e.g. keystone or convergence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Projection Apparatus (AREA)

Abstract

本发明提供一种投影型显示装置及显示方法,其使通过投影而形成的显示图像的梯形失真修正的通用性提高。通过投影使图像显示在投影面上的投影型显示装置具备:拍摄部,其通过拍摄而生成拍摄图像;角度计算部,其计算投影面与投影型显示装置的相对的角度;直线检测部,其检测拍摄图像中的至少一条基准线段;线段补全部,其根据角度,设定拍摄图像中的至少一条补全线段,使得与由基准线段和补全线段限定的区域对应的、投影面上的区域成为矩形;以及梯形失真修正部,其根据基准线段和补全线段,修正在投影面上显示的图像的梯形失真。

Description

投影型显示装置及显示方法
技术领域
本发明涉及投影型显示装置及显示方法,尤其涉及投影型显示装置及显示方法中修正在投影面上显示的图像的梯形失真的技术。
背景技术
在使用投影机使图像显示在屏幕上时,存在着因投影机与屏幕的相对的角度,在屏幕上显示的图像(以下,称为“显示图像”)产生梯形失真的情况。已知有在这样的情况下,进行修正显示图像的梯形失真的梯形失真修正(キ一スト一ン補正)的技术。
梯形失真修正,通过以下的过程来进行:例如利用CCD照相机等拍摄部拍摄屏幕,从拍摄图像中检测屏幕的框边的图像,并根据所检测的屏幕框边的图像,在投影机的液晶面板上将图像缩小形成为梯形形状。此外,在屏幕的框边的一部分的图像未被从拍摄图像检测出的情况下,将未被检测出的框边补全(例如专利文献1)。
[专利文献1]特开2006-60447号公报
但是,在上述的以往技术中,存在着这样的问题:不能够依未被从拍摄图像检测出的屏幕的框边的数量进行补全,从而不能够执行恰当的梯形失真修正。
此外,这样的问题,不限于利用投影机在屏幕上显示图像时的梯形失真修正,而是对于由通过投影使图像显示在投影面上的一般投影型显示装置进行图像的梯形失真修正的情况,是共同的问题。
发明内容
本发明是为了解决上述以往的问题而提出的,其目的在于使通过投影而形成的显示图像的梯形失真修正的通用性提高。
为了解决上述问题的至少一部分,本发明可实现为以下的方式或应用例。
[应用例1]
一种投影型显示装置,其通过投影使图像显示在投影面上,具备:
拍摄部,其通过拍摄而生成拍摄图像;
角度计算部,其计算前述投影面与前述投影型显示装置的相对的角度;
直线检测部,其检测前述拍摄图像中的至少一条基准线段;
线段补全部,其根据前述角度,设定前述拍摄图像中的至少一条补全线段,使得与由前述基准线段和前述补全线段限定的区域对应的、前述投影面上的区域成为矩形;以及
梯形失真修正部,其根据前述基准线段和前述补全线段,修正在前述投影面上显示的图像的梯形失真。
在该投影型显示装置中,由于计算投影面与投影型显示装置的相对的角度,根据角度,设定拍摄图像中的至少一条补全线段,使得与由基准线段和补全线段限定的区域对应的、投影面上的区域成为矩形,并且根据基准线段和补全线段修正在投影面上显示的图像的梯形失真,所以能够使通过投影而形成的显示图像的梯形失真修正的通用性提高。
[应用例2]
应用例1所述的投影型显示装置,还包括:
消失点计算部,其根据前述角度,计算垂直消失点和水平消失点,该垂直消失点是与垂直于预定的基准平面的任意的线对应的、前述拍摄图像上的直线所应该通过的点,该水平消失点是与平行于前述预定的基准平面的任意的线对应的、前述拍摄图像上的直线所应该通过的点。
在该投影型显示装置中,由于根据投影面与投影型显示装置的相对的角度,计算与垂直于预定的基准平面的任意的线对应的、拍摄图像上的直线所应该通过的垂直消失点和与平行于预定的基准平面的任意的线对应的、拍摄图像上的直线所应该通过的水平消失点,所以能够使通过投影而形成的显示图像的梯形失真修正的通用性提高。
[应用例3]
应用例2所述的投影型显示装置,其中:
前述直线检测部,检测前述拍摄图像中通过前述垂直消失点和前述水平消失点的至少一方的直线上的线段,作为前述基准线段;
前述线段补全部,设定前述拍摄图像中通过前述垂直消失点和前述水平消失点的至少一方的直线上的线段,作为前述补全线段。
在该投影型显示装置中,由于检测拍摄图像中通过垂直消失点和水平消失点的至少一方的直线上的线段作为基准线段,并且设定拍摄图像中通过垂直消失点和水平消失点的至少一方的直线上的线段作为补全线段,所以能够根据基准线段和补全线段实现在投影面上显示的图像的梯形失真的修正,能够使通过投影而形成的显示图像的梯形失真修正的通用性提高。
[应用例4]
应用例1~3中的任意一项所述的投影型显示装置,其中:
前述基准线段,是与前述投影面的框的四边的至少一边对应的、前述拍摄图像上的线段;
前述线段补全部,设定将前述投影面的框的四边内未被检测作为前述基准线段的边补全的前述补全线段。
在该投影型显示装置中,由于设定将投影面的框的四边内未被检测作为基准线段的边补全的补全线段,所以在投影面的框的四边的一部分未被检测出的情况下,也能够根据基准线段和补全线段实现在投影面上显示的图像的梯形失真的修正,能够使通过投影而形成的显示图像的梯形失真修正的通用性提高。
[应用例5]
应用例2所述的投影型显示装置,其中:
前述直线检测部,检测前述拍摄图像中任意的线段作为前述基准线段;
前述消失点计算部,计算第1消失点和第2消失点,该第1消失点是与前述投影面上平行于前述基准线段所对应的线段的任意的直线对应的、前述拍摄图像上的直线所应该通过的点,该第2消失点是与前述投影面上垂直于前述基准线段所对应的线段的任意的直线对应的、前述拍摄图像上的直线所应该通过的点;
前述线段补全部,设定前述拍摄图像中通过前述第1消失点和前述第2消失点的至少一方的直线上的线段,作为前述补全线段。
在该投影型显示装置中,由于对于拍摄图像中作为任意的线段的基准线段,计算第1消失点和第2消失点,并且设定拍摄图像中通过第1消失点和第2消失点的至少一方的直线上的线段作为补全线段,所以能够执行使图像显示在以任意的线段为一边的矩形的区域中的梯形失真修正,能够使通过投影而形成的显示图像的梯形失真修正的通用性提高。
[应用例6]
应用例1~5中的任意一项所述的投影型显示装置,其中:
前述角度计算部包括:
测定点位置检测部,其对于前述投影面上的3个或3个以上的预定的测定点,检测相对于前述投影型显示装置的相对的位置;以及
平面计算部,其根据前述预定的测定点的位置,计算近似前述投影面的近似平面。
在该投影型显示装置中,能够根据近似投影面的近似平面,简便地计算投影面与投影型显示装置的相对的角度。
[应用例7]
应用例6所述的投影型显示装置,其中:
前述角度计算部还包括:
图案投影部,其使包含3个或3个以上基准点的预定的图案图像投影在前述投影型显示装置上;
前述预定的测定点,是在前述投影面上显示的前述图案图像的前述基准点。
在该投影型显示装置中,能够简便地计算近似投影面的近似平面。
[应用例8]
应用例2~7中的任意一项所述的投影型显示装置,其中:
前述预定的基准平面,是前述投影型显示装置的设置面。
在该投影型显示装置中,由于检测与垂直及平行于投影型显示装置的设置面的线对应的、拍摄图像上的直线,并根据检测结果修正在投影面上显示的图像的梯形失真,所以能够使使用了与投影型显示装置的设置面垂直及平行的直线的梯形失真修正的通用性提高。
[应用例9]
应用例1~8中的任意一项所述的投影型显示装置,还具备:
发光的光源部;以及
图像形成面板部,其将有效面板图像形成在面板面的图像形成区域,该有效面板图像用于将前述光源部所发出的光调制为表示图像的有效的图像光;
其中,前述梯形失真修正部,通过根据前述基准线段的检测结果和前述补全线段的设定结果,计算作为前述图像形成区域中的一部分区域的修正后图像形成区域,并且使前述有效面板图像形成在前述图像形成区域中的前述修正后图像形成区域,来修正在前述投影面上显示的图像的梯形失真。
在该投影型显示装置中,能够根据基准线段的检测结果和补全线段的设定结果,使通过投影而形成的显示图像的梯形失真修正的通用性提高。
此外,本发明能够以各种方式来实现,例如能够以投影型显示装置及显示方法、图像处理方法及装置、图像修正方法及装置、用于实现这些方法或装置的功能的计算机程序、记录该计算机程序的记录介质、包含该计算机程序且被体现在载波内的数据信号等方式来实现。
附图说明
图1是概略地示出本发明的第1实施例的作为投影型显示装置的投影机的结构的框图;
图2是概略地示出液晶面板130与图像形成区域IF的关系的说明图;
图3是示出第1实施例的由投影机100所进行的梯形失真修正处理的流程的流程图;
图4是示出测定用图案图像PT的例子的说明图;
图5是示出预定的测定点的三维坐标的检测的概要的说明图;
图6是示出屏幕SC与投影机100的相对的角度的概念的说明图;
图7示出屏幕SC的框边的消失点计算的概要的说明图;
图8是示出照相机坐标系的说明图;
图9是示出从拍摄图像CI检测屏幕SC的框边的方法的说明图;
图10是示出边缘量累计值的直方图的例子的说明图;
图11是概略地示出本发明的第2实施例的作为投影型显示装置的投影机的结构的框图;
图12是示出第2实施例的由投影机100a所进行的梯形失真修正处理的流程的流程图;
图13是示出存在不足边的情况下的边缘量累计值的直方图的例子的说明图;
图14是示出补全边的计算方法的一例的说明图;以及
图15是示出变形例的梯形失真修正方法的说明图。
符号说明
100...投影机;102...总线;120...内部存储器;130...液晶面板;132...液晶面板驱动部;140...照明光学***;150...投影光学***;152...变焦透镜;154...变焦透镜驱动部;160...CPU;170...遥控器控制部;172...遥控器;180...拍摄部;182...拍摄图像存储器;200...图像处理部;210...角度计算部;212...图案投影部;214...测定点位置检测部;216...平面计算部;220...直线检测部;222...消失点计算部;230...梯形失真修正部;240...坐标变换部;250...不足边补全部;300...电缆。
具体实施方式
下面,基于实施例按以下的顺序说明本发明的实施方式。
A.第1实施例
A-1.投影机的结构
A-2.梯形失真修正处理
B.第2实施例
C.变形例
A.第1实施例
A-1.投影机的结构
图1是概略地示出本发明的第1实施例的作为投影型显示装置的投影机的结构的框图。投影机100投影表示图像的图像光,使图像(以下称为“显示图像”)显示在屏幕SC等投影面上。在本实施例中,屏幕SC是矩形形状的,沿着其外周具有黑色的框。
投影机100具有A/D变换部110、内部存储器120、液晶面板130、液晶面板驱动部132、照明光学***140、具有变焦透镜152的投影光学***150、变焦透镜驱动部154、CPU160、遥控器控制部170、遥控器172、拍摄部180、拍摄图像存储器182。投影机100的各构成要件,经由总线102相互连接。
A/D变换部110,对从未图示的DVD播放器、PC(个人计算机)等经由电缆300输入的输入图像信号,根据需要进行A/D变换,并输出数字图像信号。
在内部存储器120中,存储有作为图像处理部200起作用的计算机程序。图像处理部200对从A/D变换部110输出的数字图像信号,进行图像的显示状态(例如亮度、对比度、同步、跟踪(トラツキング)、颜色的深浅、色调等)的调整,之后将数字图像信号输出至液晶面板驱动部132。此外,图像处理部200包括作为模块的角度计算部210、直线检测部220、消失点计算部222、梯形失真修正部230、坐标变换部240。角度计算部210包括图案投影部212、测定点位置检测部214、平面计算部216。这些部件的功能,将在后述的梯形失真修正处理的说明中详述。
液晶面板驱动部132,根据经由图像处理部200输入的数字图像信号,驱动液晶面板130。液晶面板130,将图像(以下称为“有效面板图像PI”)形成在液晶面板130的表面(以下称为“面板面”)的图像形成区域IF,其中的有效面板图像PI用于将从照明光学***140照射的照明光调制为表示图像的有效的图像光。
图2是概略地示出液晶面板130与图像形成区域IF的关系的说明图。所谓图像形成区域IF,指根据输入到液晶面板驱动部132的数字图像信号,可形成有效面板图像PI的液晶面板130的面板面上的区域。在图2中,将图像形成区域IF表示为由虚线包围的区域。如图2(a)所示,本实施例的图像形成区域IF,被设定为与液晶面板130的面板面整个面相比,四周各小2个点左右的区域。此外,图像形成区域IF相对于液晶面板130的面板面整个面的大小可任意地设定。
在图2中,对形成有有效面板图像PI的区域附加了阴影而示出。通常,如图2(a)所示,在图像形成区域IF的整个区域形成有效面板图像PI。但是,在执行后面详述的梯形失真修正处理时,如图2(b)所示,会在液晶面板130的图像形成区域IF中的一部分区域形成有效面板图像PI,而在图像形成区域IF的其余的区域形成全黑的图像(在图2(b)中用白色表示)。在该梯形失真修正时,将形成有有效面板图像PI的图像形成区域IF中的一部分区域称为“修正后图像形成区域RIF”。在图2中,将修正后图像形成区域RIF表示为由一点划线包围的区域。
此外,例如,在输入到液晶面板驱动部132的数字图像信号的分辨率比液晶面板130的分辨率小时,在不放大所输入的数字图像而将其原样形成在液晶面板130上的情况下,如图2(c)所示,图像形成区域IF与上述两个分辨率的比相应地,被设定为比液晶面板130的面板面整个面更小的区域。
投影光学***150(图1),安装在投影机100的框体的前面,对由液晶面板130调制为了图像光的光进行放大投影。变焦透镜驱动部154能够驱动投影光学***150所具备的变焦透镜152,使变焦状态变化。在此,所谓变焦状态,指在投影光学***150中,对透过了液晶面板130的光进行投影时的放大的程度(倍率)。即,变焦透镜驱动部154,能够驱动变焦透镜152而使显示在屏幕SC上的显示图像的大小变化。
遥控器控制部170,接收来自用户的、通过遥控器172的指示,并经由总线102将该指示传送至CPU160。此外,在本实施例中,虽然投影机100通过遥控器172及遥控器控制部170接收来自用户的指示,但是,也可以通过例如操作面板等其他的结构接收来自用户的指示。
CPU160通过从内部存储器120读出作为图像处理部200的计算机程序并执行,向屏幕SC投影图像,进行后述的梯形失真修正处理等图像处理。此外,CPU160进行投影机100全体的控制。
拍摄部180具有CCD照相机,其通过拍摄而生成拍摄图像。拍摄部180,以能够对与液晶面板130的最大的图像形成区域IF(参照图2(a))对应的图像所被投影到的区域全部进行拍摄的方式,被进行了其设置位置、视场角等的设定。由拍摄部180生成的拍摄图像,被存储在拍摄图像存储器182内。此外,拍摄部180也可以具有其他的拍摄装置来代替CCD照相机。
A-2.梯形失真修正处理
图3是示出第1实施例的由投影机100所进行的梯形失真修正处理的流程的流程图。梯形失真修正处理,是以屏幕SC上的显示图像的外周线的各边成为与屏幕SC的框的各边平行的方式,修正显示图像的梯形失真的处理。梯形失真修正处理根据来自用户的、通过遥控器172的指示而执行。此外,梯形失真修正处理也可以根据例如电源接通、图像信号的输入等而自动地执行。
在步骤S110,图案投影部212(图1)使测定用图案图像PT形成在液晶面板130上,并使照明光学***140及投影光学***150向屏幕SC投影图像光。测定用图案图像PT的图像数据,存储在内部存储器120的预定的区域。图4是示出测定用图案图像PT的例子的说明图。测定用图案图像PT,包含多个基准点RP。图4(a)所示的测定用图案图像PT,是在黑色的背景上包含排列为栅格状的多个白色的点的图像,各点被设定为基准点RP。图4(b)所示的测定用图案图像PT,是在黑色的背景上配置有白色的格线图案的图像,格线的纵线与横线的交叉点被设定为基准点RP。图4(c)所示的测定用图案图像PT,是黑色区域与白色区域交替地配置而成的黑白相间的方格图案的图像,各区域的各顶点被设定为基准点RP。图4(d)所示的测定用图案图像PT,是在黑色的背景上包括白色的小矩形和包含该矩形的白色的大矩形的图像,各矩形的各顶点被设定为基准点RP。此外,测定用图案图像PT,只要是包含3个或3个以上基准点RP的图像(但是,全部的基准点RP位于一条直线上的图像除外),也可以采用图4所示的图像以外的图像。在一点上,从提高后述的屏幕SC的近似平面的算式的计算精度这一点出发,测定用图案图像PT中所包含的基准点RP的数量,越多越好。
在步骤S120(图3),拍摄部180(图1)对被投影有测定用图案图像PT的屏幕SC进行拍摄,而生成拍摄图像CI。所生成的拍摄图像CI,存储在拍摄图像存储器182内。
在步骤S130(图3),测定点位置检测部214(图1)根据拍摄图像CI,检测预定的测定点的三维坐标。预定的测定点的三维坐标的检测,是为了计算屏幕SC的近似平面的三维坐标(屏幕SC的近似平面的算式)而进行的。
图5是示出预定的测定点的三维坐标的检测的概要的说明图。在本实施例中,在以变焦透镜152的主点为原点,以变焦透镜152的光轴为z轴(zl轴)的三维坐标(以下也称为“透镜坐标系”)中,进行各测定点的三维坐标的检测。即,进行各测定点相对于投影机100的相对的位置的检测。
在图5中,在透镜坐标系中示出了被投影有测定用图案图像PT(参照图4(a))的屏幕SC。作为三维坐标的检测对象的检测点,是在屏幕SC或屏幕SC的背后的物体(例如墙壁面)上显示的测定用图案图像PT中所包含的基准点RP。此外,在图5所示的状态下,基准点RP内的一部分被放映到屏幕SC上,另一部分从屏幕SC越出而被放映到屏幕SC的背后的墙壁面上。
测定点位置检测部214分析拍摄图像CI而检测拍摄图像CI中的基准点RP的位置,并检测所检测出的基准点RP在透镜坐标系中的三维坐标。测定点的三维坐标的检测,利用变焦透镜152与拍摄部180的视差,使用根据三角测量的原理检测三维坐标的主动型的主动立体法来进行。此外,在测定点的三维坐标的检测中所使用的方法,也可以是主动立体法以外的三维坐标检测方法(例如使用多个照相机的被动型的立体法)。此外,在测定点的三维坐标的检测中所使用的坐标系,也可以是透镜坐标系以外的坐标系(例如后述的照相机坐标系)。
在步骤S140(图3),平面计算部216(图1)基于所检测的各测定点的三维坐标,计算屏幕SC的近似平面的算式。具体地,平面计算部216,利用最小二乘法,计算屏幕SC的近似平面的算式,该最小二乘法使用了测定用图案图像PT的位于中央部分的基准点RP(在图5中由虚线包围所示)的三维坐标。仅使用测定用图案图像PT的位于中央部分的基准点RP,是为了尽可能将未位于屏幕SC上的点除外。屏幕SC的近似平面的算式,如图5所示,以ax+by+cz+d=0的形式来表示。此时,向量(a,b,c)为屏幕SC的近似平面的法线向量。
此外,只要检测出全部点不位于一条直线上那样的至少3个或3个以上的基准点RP的三维坐标,屏幕SC的近似平面的算式便能够计算出。因而,在屏幕SC的近似平面的算式的计算中所使用的基准点RP的数量,可设定为3个或3个以上的任意的数。因此,在测定点的三维坐标的检测(图3的步骤S130)中,不需要检测测定用图案图像PT中所包含的全部基准点RP的三维坐标,而只要仅关于在屏幕SC的近似平面的算式的计算中所使用的基准点RP(例如测定用图案图像PT的位于中央部分的基准点RP)检测三维坐标即可。或者,也可以关于测定用图案图像PT中所包含的全部基准点RP检测三维坐标,基于三维坐标判断各个基准点RP是否是被放映到屏幕SC上的点,并使用被判定为是被放映到屏幕SC上的点的基准点RP计算屏幕SC的近似平面的算式。
在步骤S150(图3),角度计算部210(图1)计算屏幕SC与投影机100的相对的角度。图6是示出屏幕SC与投影机100的相对的角度的概念的说明图。在图6中,在以变焦透镜152的主点为原点、以与屏幕SC的近似平面垂直的方向为z轴(zs轴)的三维坐标(以下也称为“屏幕坐标系”)中示出了屏幕SC与投影机100的关系。在图6中,投影机100被载置在作为与y轴(ys轴)垂直的平面的设置面SS上。本实施例中的设置面SS,相当于本发明中的“基准平面”。
屏幕SC与投影机100(投影机100的变焦透镜152的光轴)的相对的角度,利用投影机100绕x轴(xs轴)的旋转角度即倾斜θ、投影机100绕y轴(ys轴)的旋转角度即偏离φ和投影机绕z轴(zs轴)的旋转角度即转向ψ的组合来表示。角度计算部210根据透镜坐标系中变焦透镜152的光轴与屏幕SC的近似平面的关系(参照图5),唯一地计算出屏幕SC与投影机100的相对的角度(即倾斜θ、偏离φ和转向ψ的值)。
在步骤S160(图3),消失点计算部222(图1)计算屏幕SC的框边(构成屏幕SC的框的各边)在拍摄图像CI中的消失点。图7是示出屏幕SC的框边的消失点计算的概要的说明图。在图7(a)中,在透镜坐标系(参照图5)中示出了屏幕SC的近似平面和垂直于z轴的平面(平面z=1)。此外,在图7(b)中,示出了屏幕SC的框边到平面z=1的射影(通过屏幕SC的各框边和原点O的平面与平面z=1的交线)。此外,将图7(b)所示的坐标系称为透镜坐标系的标准坐标系。标准坐标系的单位,其正45度及负45度的方向分别为正1及负1。
三维空间(例如透镜坐标系)中相互平行的任意的直线到平面(例如平面z=1)的射影,在1点交叉。将该交叉点称为消失点。由于在透镜坐标系中屏幕SC的框边的右边SF(r)与左边SF(l)相互平行,所以在标准坐标系中右边SF(r)及左边SF(l)的射影在消失点(以下称为“垂直消失点DPv”)处交叉。同样,由于在透镜坐标系中屏幕SC的框边的上边SF(t)与下边SF(b)相互平行,所以在标准坐标系中上边SF(t)及下边SF(b)的射影在消失点(以下称为“水平消失点DPh”)处交叉。此外,在以下的说明中,还将垂直消失点DPv及水平消失点DPh统一简称为“消失点DP”。
消失点DP(垂直消失点DPv及水平消失点DPh)的位置(坐标),由屏幕SC与投影机100的相对的角度(倾斜θ、偏离φ、转向ψ)唯一地确定。消失点DP在透镜坐标系的标准坐标系中的坐标,如下述的式(1)及式(2)所表示。
【数学式1】
DPv
= ( sin ψ · cos φ sin ψ · sin φ · cos θ + cos ψ · sin θ , - sin ψ · sin φ · sin θ + cos ψ · cos θ sin ψ · sin φ · cos θ + cos ψ · sin θ ) · · · ( 1 )
【数学式2】
DPh
= ( cos ψ · cos φ cos ψ · sin φ · cos θ - sin ψ · sin θ , - cos ψ · sin φ · sin θ - sin ψ · cos θ cos ψ · sin φ · cos θ - sin ψ · sin θ ) · · · ( 2 )
此外,在转向ψ为0的情况下,消失点DP在透镜坐标系的标准坐标系中的坐标,为下述的式(3)及式(4)那样。
【数学式3】
DPv = ( 0 , 1 tan θ ) · · · ( 3 )
【数学式4】
DPh = ( 1 tan φ · cos θ , - tan θ ) · · · ( 4 )
利用上述式(1)~(4)计算出的坐标,是消失点DP在透镜坐标系的标准坐标系中的坐标。由于后述的屏幕SC的框边的检测(图3的步骤S170)在照相机坐标系的标准坐标系中执行,所以坐标变换部240(图1)利用射影变换执行从透镜坐标系的标准坐标系(参照图7(b))到照相机坐标系的标准坐标系的坐标变换。图8是示出照相机坐标系的说明图。照相机坐标系,是以拍摄部180的CCD的中心点为原点O、以拍摄部180的透镜的光轴为z轴(zc轴)的三维坐标。此外,照相机坐标系的标准坐标系,是用到垂直于z轴的平面(平面z=1)的射影来表示照相机坐标系中的点、线、面等的坐标系。标准坐标系的单位,其正45度及负45度的方向,分别为正1及负1。
该坐标变换,是为了补偿投影机100中变焦透镜152的光轴与拍摄部180的透镜的光轴的不同而进行的。即,上述的消失点DP(垂直消失点DPv及水平消失点DPh)的坐标是透镜坐标系的标准坐标系中的坐标,通过坐标变换,可求取拍摄图像CI中的消失点DP的坐标。
坐标变换部240,使用矩阵M进行坐标变换(射影变换)。在将表示变焦透镜152和拍摄部180的相对的旋转量的三维的旋转矩阵设定为R,将表示变焦透镜152与拍摄部180的相对的平移量的三维的列向量设定为t,将屏幕SC的近似平面的方程式表示为ax+by+cz=1时的三维的行向量设定为n=(a,b,c),将三维的单位矩阵设定为E时,矩阵M表示为M=R(E+tn)。此外,在本实施例中,虽然坐标变换部240所进行的坐标变换(射影变换)是使用根据变焦透镜152与拍摄部180的相对的关系而计算出的矩阵M来进行的,但是,也可以根据基准点RP在透镜坐标系中的坐标与在照相机坐标系中的坐标的对应关系,利用最小二乘法,计算最佳的射影变换来执行射影变换。
在步骤S170(图3),直线检测部220(图1)检测在拍摄图像CI上映现的屏幕SC的框边(右边SF(r)、左边SF(l)、上边SF(t)、下边SF(b))。图9是示出从拍摄图像CI检测屏幕SC的框边的方法的说明图。在图9中,在照相机坐标系的标准坐标系中示出了拍摄图像CI和消失点DP(垂直消失点DPv及水平消失点DPh)。
直线检测部220,为了检测屏幕SC的框边,首先设定多条通过消失点DP的直线(以下也称为“消失点通过直线PL”)。具体地,对于垂直消失点DPv及水平消失点DPh的各个,设定通过消失点DP并且倾斜度各相差预定的倾斜角度的多条直线作为消失点通过直线PL。此外,消失点通过直线PL的设定方法并不限于此,也可以例如在预定的直线(例如拍摄图像CI的各边)上设定各隔开预定的像素数的间隔的多个参照像素,并将连接各参照像素与消失点DP的多条直线设定作为消失点通过直线PL。
接着,直线检测部220,沿着在拍摄图像CI上设定的消失点通过直线PL设置微分滤波器、拉普拉斯滤波器这样的轮廓提取滤波器,来对边缘量进行累计,并生成直方图。图10是示出边缘量累计值的直方图的例子的说明图。在图10中,示出了沿着通过了垂直消失点DPv的消失点通过直线PL的边缘量累计值的直方图。直线检测部220,在边缘量累计值的直方图中,检测表示超过阈值T的最大的2个峰值(极大值)的位置,作为屏幕SC的2个框边在拍摄图像CI中的位置。在图10的例子中,由于存在2个超过阈值T的峰值,所以检测右侧的峰值的位置作为右边SF(r)的位置,检测左侧的峰值的位置作为左边SF(l)的位置。在图10所示的边缘量累计值的直方图中,在超过阈值T的峰值例如存在3个的情况下,将值较大的2个峰值的位置设定为2个框边的位置。同样,直线检测部220,使用沿着通过了水平消失点DPh的消失点通过直线PL的边缘量累计值的直方图,检测上边SF(t)及下边SF(b)在拍摄图像CI中的位置。由此,在拍摄图像CI中检测出屏幕SC的框的各边。此外,在对沿着通过了垂直消失点DPv的消失点通过直线PL的边缘量进行累计时,优选使用对于拍摄图像CI的左右方向(水平方向)的轮廓有较强反应的轮廓提取滤波器,在对沿着通过了水平消失点DPh的消失点通过直线PL的边缘量进行累计时,优选使用对于拍摄图像CI的上下方向(垂直方向)的轮廓有较强反应的轮廓提取滤波器。
在步骤S180,梯形失真修正部230(图1),参照在拍摄图像CI中检测出的屏幕SC的框边的位置,执行梯形失真修正。梯形失真修正,可使用公知的方法(例如特开2006-60447号公报中所记载的方法)来执行。即,利用射影变换将屏幕SC的框边在图9中所示的照相机坐标系的标准坐标系中的坐标值,变换到透镜坐标系的标准坐标系中。该坐标变换,利用上述的在从透镜坐标系的标准坐标系到照相机坐标系的标准坐标系的坐标变换中所使用的射影变换的逆变换来执行。根据利用坐标变换计算出的屏幕SC的框边在透镜坐标系的标准坐标系中的坐标值,计算液晶面板130上的与屏幕SC对应的区域,作为修正后图像形成区域RIF(参照图2)。此后,根据需要,在进行变焦状态的调整之后,通过在液晶面板130上的修正后图像形成区域RIF形成有效面板图像PI,来修正屏幕SC上的显示图像的梯形失真。
如以上所说明的,在第1实施例的投影机100中,计算屏幕SC与投影机100的相对的角度,并根据所计算的角度在拍摄图像CI中检测屏幕SC的框边,根据框边的检测结果修正图像的梯形失真。因此,在第1实施例的投影机100中,由于能够降低错误地将拍摄图像CI中不是屏幕SC的框边的直线检测为屏幕SC的框边的可能性,所以能够提高显示图像的梯形失真修正的精度。即,在第1实施例的投影机100中,由于通过计算屏幕SC的框边所应该通过的消失点DP,并从通过了消失点DP的直线(消失点通过直线PL)中进行选择来在拍摄图像CI中检测屏幕SC的框边,所以能够降低例如错误地将拍摄图像CI中映照到屏幕SC上的荧光灯的图像检测为屏幕SC的框边的可能性。
B.第2实施例
图11是概略地示出本发明的第2实施例的作为投影型显示装置的投影机的结构的框图。第2实施例的投影机100a,在图像处理部200a包括不足边补全部250这一点上,与图1所示的第1实施例的投影机100不同。不足边补全部250的功能,将在后述的梯形失真修正处理的说明中详细描述。第2实施例的投影机100a的其他结构,与图1所示的第1实施例的投影机100相同。不足边补全部250相当于本发明中的线段补全部。
图12是示出第2实施例的由投影机100a进行的梯形失真修正处理的流程的流程图。第2实施例的梯形失真修正处理的从步骤S110至S170的处理内容,与图3所示的第1实施例的从步骤S110至S170的处理内容相同。
在步骤S172(图12),图像处理部200a(图11),判断在步骤S170的屏幕SC的框边的检测中,是否有未被检测出的框边(以下也称为“不足边”)。如图10所示,对于垂直消失点DPv及水平消失点DPh的各个,在沿着通过了消失点DP的消失点通过直线PL的边缘量累计值的直方图中,如果存在超过阈值T的2个峰值,则屏幕SC的框边的全部(右边SF(r)、左边SF(l)、上边SF(t)、下边SF(b))被检测出。在此情况下,判断为没有不足边(步骤S172:否),从而与第1实施例同样,根据所检测出的屏幕SC的框边的位置,执行梯形失真修正(步骤S180)。此外,在拍摄图像CI中检测出的框边,相当于本发明中的基准线段。
另一方面,在沿着通过了消失点DP的消失点通过直线PL的边缘量累计值的直方图中,有超过阈值T的峰值不是存在2个、屏幕SC的框边的一部分未被检测出的情况。图13是示出存在不足边的情况下的边缘量累计值的直方图的例子的说明图。在图13中,示出了沿着通过了垂直消失点DPv的消失点通过直线PL的边缘量累计值的直方图。如图13所示,当在边缘量累计值的直方图中超过阈值T的峰值不是存在2个的情况下,屏幕SC的右边SF(r)和左边SF(l)的至少一方的位置未被检测出。在图13的例子中,左边SF(l)的位置被检测出,但是右边SF(r)的位置未被检测出。
当在屏幕SC的框边的检测中存在不足边的情况下,考虑是不足边未映现在拍摄图像CI上、即屏幕SC的不足边位于拍摄部180的视场角的范围之外,还是尽管屏幕SC的不足边映现在了拍摄图像CI上,但因某种原因边缘量变小,从而未被检测出。这样,在存在不足边的情况下(步骤S172:是),由于不能够直接计算出修正后图像形成区域RIF(参照图2),所以由不足边补全部250(图11)进行将不足边补全的补全边的计算(图12的步骤S174)。
图14是示出补全边的计算方法的一例的说明图。在图14中,在照相机坐标系的标准坐标系中示出了拍摄图像CI和消失点DP(垂直消失点DPv及水平消失点DPh)。在图14的例子中,在拍摄图像CI中,虽然检测出了屏幕SC的左边SF(l)及上边SF(t),但是右边SF(r)及下边SF(b)未被检测出,从而成为不足边。在此情况下,进行将右边SF(r)补全的补全边CS(r)和将下边SF(b)补全的补全边CS(b)的计算。
不足边补全部250,首先,计算将下边SF(b)补全的补全边CS(b)。具体地,将连接水平消失点DPh与左边SF(l)的下端点的消失点通过直线PL内的、位于拍摄图像CI的区域内的部分(线段),设定为补全边CS(b)。不足边补全部250,接着,计算将右边SF(r)补全的补全边CS(r)。具体地,将连接垂直消失点DPv与补全边CS(b)的右端的消失点通过直线PL内的、被上边SF(t)和补全边CS(b)所挟持的部分(线段),设定为补全边CS(r)。
如果这样设定了补全边CS(b)及CS(r),则与补全边CS(b)相当的、实际的屏幕SC上的线段,与屏幕SC的下边SF(b)及上边SF(t)平行;与补全边CS(r)相当的、实际的屏幕SC上的线段,与屏幕SC的右边SF(r)及左边SF(l)平行。因此,与由检测边(上边SF(t)及左边SF(l))和补全边CS(补全边CS(b)及CS(r))包围的区域(以下也称为“目标区域TA”)(在图14中附加阴影而示出)相当的、实际的屏幕SC上的区域,成为矩形的区域,从而如果以在该区域上显示图像的方式进行梯形失真修正,则能够修正显示图像的梯形失真。在补全边计算(图12的步骤S174)之后的步骤S180,执行这样的梯形失真修正。
此外,在图14的例子中,虽然首先计算将下边SF(b)补全的补全边CS(b),之后计算将右边SF(r)补全的补全边CS(r),但是,将不足边补全的补全边CS的计算的顺序可以任意地设定。例如,在图14的例子中,也可以首先计算将右边SF(r)补全的补全边CS(r),之后计算将下边SF(b)补全的补全边CS(b)。此外,在图14的例子中,虽然如上所述,将下边SF(b)补全的补全边CS(b)以通过左边SF(l)的下端的方式被计算出,将右边SF(r)补全的补全边CS(r)以通过补全边CS(b)的右端的方式被计算出,但是不需要必须这样来计算补全边CS。但是,通过利用这样的方法计算补全边CS,能够将目标区域TA最大限度设定得大,从而能够尽可能增大梯形失真修正处理后的屏幕SC上的显示图像。
此外,在图14的例子中,虽然所示出的是屏幕SC的框边内的下边SF(b)及右边SF(r)这两边是不足边的情况,但是其他边是不足边的情况下的补全边CS的计算也可同样来执行。即,将下边SF(b)及上边SF(t)补全的补全边CS,可设定为通过水平消失点DPh的消失点通过直线PL上的线段,将左边SF(l)及右边SF(r)补全的补全边CS可设定为通过垂直消失点DPv的消失点通过直线PL上的线段。因此,本实施例的投影机100a,即使在从拍摄图像CI仅检测出屏幕SC的框边的1条、而其余的3条边全部为不足边的情况下,也能够通过计算将3条不足边的各个补全的补全边CS,来进行梯形失真修正。进而,本实施例的投影机100a,即使在从拍摄图像CI一条也未检测出屏幕SC的框边、4条边全部为不足边的情况下,也能够通过计算将4条不足边的各个补全的补全边CS,来进行梯形失真修正。
此外,在第2实施例中,与补全边CS的设定的方法相应地,目标区域TA的宽高比会发生变化。因此,在执行梯形失真修正(图12的步骤S180)之前,也可以以与目标区域TA对应的、实际的屏幕SC上的区域的宽高比成为预定的值的方式,执行宽高比的调整。由此,无论补全边CS的设定的方法如何,都能够将梯形失真修正后的显示图像的宽高比固定为预定的值(例如3∶4)。
如以上所说明的,在第2实施例的投影机100a中,在拍摄图像CI中检测屏幕SC的框边,计算屏幕SC与投影机100a的相对的角度,并根据所计算的角度,以与由补全边CS和检测边限定的区域对应的、屏幕SC上的区域成为矩形的方式在拍摄图像CI中设定补全边CS,并根据检测边和补全边CS修正在屏幕SC上显示的图像的梯形失真。因此,在第2实施例的投影机100a中,即使在拍摄图像CI中未检测出屏幕SC的框边的一部分或全部的情况下,也由于设定将未检测出的框边补全的补全边,所以能够执行显示图像的梯形失真修正。因此,通过投影所形成的显示图像的梯形失真修正的通用性得以提高。例如,即使在投影机100a与屏幕SC的位置关系成为屏幕SC的框边的一部分未映现在拍摄图像CI上那样的关系的情况下,也能够恰当地执行显示图像的梯形失真修正。
C.变形例
此外,本发明并不限于上述的实施例、实施方式等,在不脱离其主旨的范围内可以以各种方式来实施,例如也可以实现以下那样的变形。
C-1.变形例1
在上述第2实施例中,虽然将由在拍摄图像CI中检测出的屏幕SC的框边以及将未检测出的框边补全的补全边CS所包围的区域设定为目标区域TA,并执行使图像显示在与目标区域TA相当的、实际的屏幕SC上的区域上那样的梯形失真修正,但是,梯形失真修正的方法并不限于此。图15是示出变形例的梯形失真修正方法的说明图。在图15所示的变形例中,执行使图像显示在这样的矩形区域上那样的梯形失真修正,该矩形区域以与在拍摄图像CI中检测出或设定的一条线段(以下也称为“基准线段RL”)对应的、屏幕SC上的线段为一边。在此,基准线段RL,可任意地检测或设定,与基准线段RL对应的屏幕SC上的线段并不限于是与屏幕SC的框边垂直或是平行。因此,在梯形失真修正后显示图像的矩形区域的各边也不限于是与屏幕SC的框边垂直或是平行。
在图15所示的变形例中,也与第2实施例同样,计算拍摄图像CI中屏幕SC的右边SF(r)与左边SF(l)交叉的垂直消失点DPv的坐标、屏幕SC的上边SF(t)与下边SF(b)交叉的水平消失点DPh的坐标。
在此,已知:在标准坐标系中,全部的消失点位于同一直线上。因此,在将连接垂直消失点DPv和水平消失点DPh的直线称为直线L1时,基准线段RL的延长线与直线L1的交叉点,成为与基准线段RL有关的消失点(以下称为“第1消失点DP1”)。即,与拍摄图像CI中通过第1消失点DP1的直线对应的、实际的屏幕SC上的直线,成为与对应于基准线段RL的屏幕SC上的直线平行。因而,例如如图15所示,通过第1消失点DP1的直线的一部分(线段)被设定为补全边CS(l)。
接着,计算拍摄图像CI上的这样的直线所应该通过的消失点(以下称为“第2消失点DP2”):该直线是与实际的屏幕SC上垂直于基准线段RL所对应的线段的任意的直线对应的、拍摄图像CI上的直线。第2消失点DP2,与第1消失点DP1同样位于直线L1上。此外,在将第1消失点DP1的三维坐标设定为(a,b,1),将第2消失点DP2的三维坐标设定为(c,d,1)时,以下的式(5)成立。因而,根据拍摄图像CI中3个消失点(垂直消失点DPv、水平消失点DPh、第1消失点DP1)的坐标,能够唯一地计算出第2消失点DP2的坐标。并且,通过第2消失点DP2的直线的一部分(线段)被设定为补全边CS(2)及CS(3)。
a·c+b·d+1=0…(5)
如图15所示,由基准线段RL和3条补全边CS包围的区域被设定为目标区域TA。与这样设定的目标区域TA相当的、实际的屏幕SC上的区域成为矩形形状。因而,通过利用图15所示的方法设定目标区域TA,并执行使图像显示在与所设定的目标区域TA相当的、实际的屏幕SC上的区域这样的梯形失真修正,能够修正在屏幕SC上显示的图像的梯形失真。
C-2.变形例2
在上述各实施例中,虽然以所显示的测定用图案图像PT中所包含的基准点RP为测定点而进行三维坐标的检测,并且根据所检测的基准点RP的三维坐标计算屏幕SC的近似平面的算式,但是,作为三维坐标的检测对象的测定点,不需要是基准点RP。例如在屏幕SC的外周框的各顶点上附加有标记的情况等屏幕SC自身具有可能成为测定点的点的情况下,也可以进行该点的三维坐标的检测,并根据检测结果计算屏幕SC的近似平面的算式。在此情况下,不需要进行测定用图案图像PT的投影。
此外,在上述各实施例中,虽然测定点的三维坐标的检测是利用使用了拍摄部180的三角测量的原理来执行的,但是,也可以利用距离传感器来执行。
此外,在上述各实施例中,虽然为了计算屏幕SC与投影机100的相对的角度而进行了屏幕SC的近似平面的算式的计算,但是水平方向的投影角度(偏离φ)也可以通过使用距离传感器计算屏幕SC上的2个或2个以上的测定点的距离来推算出,垂直方向的投影角度(倾斜θ)也可以使用加速度传感器来推算出。
C-3.变形例3
在上述各实施例中,虽然拍摄图像CI中屏幕SC的框边的检测是通过在沿着消失点通过直线PL的边缘量累计值的直方图中检测峰值而执行的,但是也可以利用其他的方法进行屏幕SC的框边的检测。例如,也可以通过利用提取拍摄图像CI中对比度大的像素的方法来提取屏幕SC的框边的候补,并判断屏幕SC的框边的候补是否位于消失点通过直线PL上,来检测屏幕SC的框边。此外,也可以通过使用霍夫(ハフ)变换来提取拍摄图像CI中的直线,并判断所提取的直线是否通过消失点DP,来检测屏幕SC的框边。
C-4.变形例4
在上述各实施例中,在测定点的三维坐标的检测、屏幕SC的框边的消失点的计算时使用的坐标系仅是一例,在这些处理中所使用的坐标系可任意地设定,例如,也可以在测定点的三维坐标的检测中不使用透镜坐标系,而使用照相机坐标系。此外,在上述各实施例中,虽然为了补偿投影机100中变焦透镜152的光轴与拍摄部180的透镜的光轴的不同而执行了透镜坐标系的标准坐标系与照相机坐标系的标准坐标系之间的坐标变换,但是假如光轴的不同仅是稍微一点,则也可以省略坐标变换。
C-5.变形例5
在上述各实施例中,虽然使用了屏幕SC作为投影面,但是也可以使用屏幕SC以外的面作为投影面。例如,在房间的墙壁是白色的情况下,也可以在该墙壁上利用带子、涂饰等用黑色的线描绘矩形的框,将该墙壁作为投影面。或者,也可以在白板上用黑色的线标记描绘矩形的框,将该白板作为投影面。
此外,作为投影面的颜色,并不限定于框是黑色的,框的内侧及外侧的区域是白色的,而也可以框是白色的,框的内侧及外侧的区域是黑色的。例如,也可以在黑板上用白色的粉笔描绘矩形的框,将该黑板作为投影面。此外,投影面的颜色并不限定于白色和黑色,而只要框的颜色和框的内侧及外侧的区域的颜色,是具有所期望的对比度的颜色,怎样的颜色的组合都可以。
此外,在上述各实施例中,虽然在拍摄图像CI中检测屏幕SC的框边,并根据所检测的屏幕SC的框边执行梯形失真修正,但是也可以在拍摄图像CI中检测屏幕SC的框边以外的直线、即与设置面SS(参照图6)垂直或水平的直线,并根据所检测的直线执行梯形失真修正。例如,当在屏幕SC的框边的内侧,设置有确定矩形区域的轮廓线的情况下,也可以在拍摄图像CI中检测该轮廓线,并根据该轮廓线执行梯形失真修正。
此外,在上述各实施例中,虽然将设置面SS作为基准平面,来执行作为与基准平面垂直或平行的直线的屏幕SC的框边的检测,但是也可以将设置面SS以外的平面作为基准平面。例如,也可以将与投影机100具有预定的关系的其他的平面(例如投影机100的框体的底面、上面等)作为基准平面。在此情况下,也可从拍摄图像CI中检测与基准平面垂直或平行的直线的图像,并根据所检测的直线执行梯形失真修正。
C-6.变形例6
在上述各实施例中,虽然投影机100仅具有1个液晶面板130,但是投影机100也可以具有与多个色分量对应的多个液晶面板130。此外,投影机100也可以具有液晶面板以外的电光装置(例如DMD(TexasInstruments公司的商标))。此外,投影机100也可以是CRT投影机。此外,本发明并不限于投影机100,而可以应用于通过投影使图像显示在投影面上的一般投影型显示装置。
C-7.变形例7
在上述各实施例中,虽然拍摄部180具有CCD照相机,但是拍摄部180只要能够通过拍摄生成拍摄图像即可,例如其也可以具有CMOS照相机等其他的拍摄装置。
C-8.变形例8
在上述各实施例中,虽然投影机100具备变焦透镜152和变焦透镜驱动部154,但是投影机100也可以不必须具备具有变焦功能的透镜,投影机100也可以具备焦距被固定的单焦点透镜。
C-9.变形例9
在上述各实施例中,也可以将由硬件实现的结构的一部分替换为软件,相反,也可以将由软件实现的结构的一部分替换为硬件。
此外,在本发明的功能的一部分或全部用软件实现的情况下,该软件(计算机程序)能够以存储在计算机可读的记录介质中的形式来提供。在本发明中,所谓“计算机可读的记录介质”,并不限于软盘、CD-ROM这样的移动型的记录介质,而还包括各种RAM、ROM等计算机内的内部存储装置、硬盘等固定在计算机内的外部存储装置等。

Claims (9)

1.一种投影型显示装置,其通过投影使图像显示在投影面上,具备:
拍摄部,其拍摄通过前述投影型显示装置投影于前述投影面上的、包含3个或3个以上基准点的预定的图案图像而生成拍摄图像;
角度计算部,其计算前述投影面与前述投影型显示装置的相对的角度;
消失点计算部,其根据前述角度,计算垂直消失点和水平消失点,该垂直消失点是与垂直于预定的基准平面的任意的线对应的、前述拍摄图像上的直线所应该通过的点,该水平消失点是与平行于前述预定的基准平面的任意的线对应的、前述拍摄图像上的直线所应该通过的点;
直线检测部,其检测前述拍摄图像中的至少一条基准线段;
线段补全部,其根据前述角度,设定前述拍摄图像中的至少一条补全线段,使得与由前述基准线段和前述补全线段限定的区域对应的、前述投影面上的区域成为矩形;以及
梯形失真修正部,其根据前述基准线段和前述补全线段,修正在前述投影面上显示的图像的梯形失真。
2.权利要求1所述的投影型显示装置,其中:
前述直线检测部,检测前述拍摄图像中通过前述垂直消失点和前述水平消失点的至少一方的直线上的线段,作为前述基准线段;
前述线段补全部,设定前述拍摄图像中通过前述垂直消失点和前述水平消失点的至少一方的直线上的线段,作为前述补全线段。
3.权利要求1或2所述的投影型显示装置,其中:
前述基准线段,是与前述投影面的框的四边的至少一边对应的、前述拍摄图像上的线段;
前述线段补全部,设定将前述投影面的框的四边内未被检测作为前述基准线段的边补全的前述补全线段。
4.权利要求1所述的投影型显示装置,其中:
前述直线检测部,检测前述拍摄图像中任意的线段作为前述基准线段;
前述消失点计算部,计算第1消失点和第2消失点,该第1消失点是与前述投影面上平行于前述基准线段所对应的线段的任意的直线对应的、前述拍摄图像上的直线所应该通过的点,该第2消失点是与前述投影面上垂直于前述基准线段所对应的线段的任意的直线对应的、前述拍摄图像上的直线所应该通过的点;
前述线段补全部,设定前述拍摄图像中通过前述第1消失点和前述第2消失点的至少一方的直线上的线段,作为前述补全线段。
5.权利要求1或2所述的投影型显示装置,其中:
前述角度计算部包括:
测定点位置检测部,其对于前述投影面上的3个或3个以上的预定的测定点,检测相对于前述投影型显示装置的相对的位置;以及
平面计算部,其根据前述预定的测定点的位置,计算近似前述投影面的近似平面。
6.权利要求5所述的投影型显示装置,其中:
前述角度计算部还包括:
图案投影部,其使包含3个或3个以上前述基准点的预定的图案图像投影在前述投影面上;
前述预定的测定点,是在前述投影面上显示的前述图案图像的前述基准点。
7.权利要求1或2所述的投影型显示装置,其中:
前述预定的基准平面,是前述投影型显示装置的设置面。
8.权利要求1或2所述的投影型显示装置,还具备:
发光的光源部;以及
图像形成面板部,其将有效面板图像形成在面板面的图像形成区域,该有效面板图像用于将前述光源部所发出的光调制为表示图像的有效的图像光;
其中,前述梯形失真修正部,通过根据前述基准线段的检测结果和前述补全线段的设定结果,计算作为前述图像形成区域中的一部分区域的修正后图像形成区域,并且使前述有效面板图像形成在前述图像形成区域中的前述修正后图像形成区域,来修正在前述投影面上显示的图像的梯形失真。
9.一种显示方法,其通过投影型显示装置使图像显示在投影面上,包括:
(a)拍摄通过前述投影型显示装置投影于前述投影面上的、包含3个或3个以上基准点的预定的图案图像而生成拍摄图像的步骤;
(b)计算前述投影面与前述投影的光轴的相对的角度的步骤;
(c)根据前述角度,计算垂直消失点和水平消失点的步骤,该垂直消失点是与垂直于预定的基准平面的任意的线对应的、前述拍摄图像上的直线所应该通过的点,该水平消失点是与平行于前述预定的基准平面的任意的线对应的、前述拍摄图像上的直线所应该通过的点;
(d)检测前述拍摄图像中的至少一条基准线段的步骤;
(e)根据前述角度,设定前述拍摄图像中的至少一条补全线段,使得与由前述基准线段和前述补全线段限定的区域对应的、前述投影面上的区域成为矩形;以及
(f)根据前述基准线段和前述补全线段,修正在前述投影面上显示的图像的梯形失真。
CN2009101654789A 2008-08-19 2009-08-18 投影型显示装置及显示方法 Active CN101656858B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008210811A JP5266954B2 (ja) 2008-08-19 2008-08-19 投写型表示装置および表示方法
JP210811/2008 2008-08-19

Publications (2)

Publication Number Publication Date
CN101656858A CN101656858A (zh) 2010-02-24
CN101656858B true CN101656858B (zh) 2012-12-05

Family

ID=41696068

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101654789A Active CN101656858B (zh) 2008-08-19 2009-08-18 投影型显示装置及显示方法

Country Status (3)

Country Link
US (1) US8251524B2 (zh)
JP (1) JP5266954B2 (zh)
CN (1) CN101656858B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111083456A (zh) * 2019-12-24 2020-04-28 成都极米科技股份有限公司 投影校正方法、装置、投影仪及可读存储介质

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011065025A (ja) * 2009-09-18 2011-03-31 Sanyo Electric Co Ltd 投写型映像表示装置
US20110103643A1 (en) * 2009-11-02 2011-05-05 Kenneth Edward Salsman Imaging system with integrated image preprocessing capabilities
JP2011154345A (ja) * 2009-12-28 2011-08-11 Sanyo Electric Co Ltd 投写型映像表示装置及び画像調整方法
TWI439788B (zh) * 2010-01-04 2014-06-01 Ind Tech Res Inst 投影校正系統及方法
JP5671901B2 (ja) * 2010-09-15 2015-02-18 セイコーエプソン株式会社 投射型表示装置およびその制御方法
JP5556556B2 (ja) * 2010-10-05 2014-07-23 セイコーエプソン株式会社 プロジェクター、台形歪み補正方法
JP2013033206A (ja) 2011-07-06 2013-02-14 Ricoh Co Ltd 投影型表示装置、情報処理装置、投影型表示システム、およびプログラム
JP5849522B2 (ja) * 2011-08-18 2016-01-27 株式会社リコー 画像処理装置、プロジェクタ、プロジェクタシステム、画像処理方法、そのプログラム、及び、そのプログラムを記録した記録媒体
JP5834615B2 (ja) 2011-08-18 2015-12-24 株式会社リコー プロジェクタ、その制御方法、そのプログラム、及び、そのプログラムを記録した記録媒体
JP6015037B2 (ja) 2012-03-08 2016-10-26 セイコーエプソン株式会社 画像処理装置、画像処理方法、およびプロジェクター
US9514716B2 (en) * 2012-10-19 2016-12-06 Casio Computer Co., Ltd. Projection apparatus, projection control apparatus, projection system, and projection state adjustment method
CN103533279A (zh) * 2013-10-24 2014-01-22 深圳市晶日盛科技有限公司 一种多投影拼接的校准方法
US9915857B2 (en) * 2013-12-09 2018-03-13 Geo Semiconductor Inc. System and method for automated test-pattern-free projection calibration
JP6624807B2 (ja) * 2014-08-08 2019-12-25 キヤノン株式会社 画像投射装置およびプログラム
US9769443B2 (en) * 2014-12-11 2017-09-19 Texas Instruments Incorporated Camera-assisted two dimensional keystone correction
EP3506167B1 (en) 2016-09-12 2022-06-22 Huawei Technologies Co., Ltd. Processing method and mobile device
CN109190617B (zh) * 2018-08-09 2020-08-07 腾讯科技(深圳)有限公司 一种图像的矩形检测方法、装置及存储介质
CN109688390B (zh) * 2018-12-12 2020-11-17 中国科学院深圳先进技术研究院 一种投影画面自动校正方法、***
KR102605035B1 (ko) * 2019-02-22 2023-11-24 삼성전자주식회사 프로젝터를 포함하는 전자 장치
US11889235B2 (en) * 2019-04-26 2024-01-30 Sony Group Corporation Image display apparatus
US11528528B2 (en) * 2019-11-28 2022-12-13 Coretronic Corporation Method and system for controlling projector
JP2021197018A (ja) * 2020-06-17 2021-12-27 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
US20230291877A1 (en) * 2020-08-24 2023-09-14 Sony Group Corporation Information processing device and method
WO2022080260A1 (ja) * 2020-10-13 2022-04-21 パナソニックIpマネジメント株式会社 設置情報取得方法、補正方法、プログラム、及び設置情報取得システム
JP2022073094A (ja) * 2020-10-30 2022-05-17 セイコーエプソン株式会社 光学モジュール及び虚像表示装置
JP2022126436A (ja) * 2021-02-18 2022-08-30 富士フイルム株式会社 投写型表示装置
US11947243B2 (en) * 2022-03-24 2024-04-02 Changzhou Aac Raytech Optronics Co., Ltd. Auto-focus apparatus for camera
US11982932B2 (en) * 2022-03-25 2024-05-14 Light Show Technology Co., LTD. Projection display device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1713069A (zh) * 2004-06-16 2005-12-28 精工爱普生株式会社 投影机和图像修正方法
CN1738441A (zh) * 2004-08-19 2006-02-22 精工爱普生株式会社 使用屏幕的一部分的边的梯形失真校正
CN1831631A (zh) * 2005-03-07 2006-09-13 精工爱普生株式会社 投影机及其控制方法
CN1845592A (zh) * 2005-04-06 2006-10-11 精工爱普生株式会社 投影机的梯形校正

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19902456A1 (de) * 1999-01-22 2000-08-10 Boerge Carlstroem Verfahren zur Herstellung eines glasfaserverstärkten Kunststoffrohres sowie einer Kupplung
US6520647B2 (en) * 2000-08-17 2003-02-18 Mitsubishi Electric Research Laboratories Inc. Automatic keystone correction for projectors with arbitrary orientation
EP1385335B1 (en) * 2002-07-23 2009-04-22 NEC Display Solutions, Ltd. Image projector with image-feedback control
JP2007036482A (ja) * 2005-07-25 2007-02-08 Nippon Telegr & Teleph Corp <Ntt> 情報投影表示装置およびプログラム
JP2007094036A (ja) * 2005-09-29 2007-04-12 Casio Comput Co Ltd 投影装置、投影方法及びプログラム
JP3953500B1 (ja) * 2006-02-07 2007-08-08 シャープ株式会社 画像投影方法及びプロジェクタ
JP5067536B2 (ja) 2007-02-23 2012-11-07 セイコーエプソン株式会社 プロジェクタ、プログラム、情報記憶媒体および画像生成方法
JP4340923B2 (ja) * 2007-02-23 2009-10-07 セイコーエプソン株式会社 プロジェクタ、プログラムおよび情報記憶媒体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1713069A (zh) * 2004-06-16 2005-12-28 精工爱普生株式会社 投影机和图像修正方法
CN1738441A (zh) * 2004-08-19 2006-02-22 精工爱普生株式会社 使用屏幕的一部分的边的梯形失真校正
CN1831631A (zh) * 2005-03-07 2006-09-13 精工爱普生株式会社 投影机及其控制方法
CN1845592A (zh) * 2005-04-06 2006-10-11 精工爱普生株式会社 投影机的梯形校正

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111083456A (zh) * 2019-12-24 2020-04-28 成都极米科技股份有限公司 投影校正方法、装置、投影仪及可读存储介质

Also Published As

Publication number Publication date
US8251524B2 (en) 2012-08-28
JP5266954B2 (ja) 2013-08-21
US20100045942A1 (en) 2010-02-25
CN101656858A (zh) 2010-02-24
JP2010050542A (ja) 2010-03-04

Similar Documents

Publication Publication Date Title
CN101656858B (zh) 投影型显示装置及显示方法
CN101656857B (zh) 投影型显示装置和显示方法
EP1628259B1 (en) Automatic keystone distortion correction using a part of edges of a screen
US10319111B2 (en) Image projection device for 3D measurement and calibration method for calibration of camera and projector
JP4055010B2 (ja) 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP5257616B2 (ja) プロジェクター、プログラム、情報記憶媒体および台形歪み補正方法
US9723281B2 (en) Projection apparatus for increasing pixel usage of an adjusted projection area, and projection method and program medium for the same
US8011789B2 (en) Rear projection display
JP5239611B2 (ja) 投写型表示装置および画像の補正方法
JPWO2017169186A1 (ja) 画像投影システムおよび補正方法
JP2008211355A (ja) プロジェクタ、プログラムおよび情報記憶媒体
JP5561503B2 (ja) プロジェクター、プログラム、情報記憶媒体および台形歪み補正方法
JPWO2018042582A1 (ja) 投射型映像表示装置および投射映像の調整方法
JP5187480B2 (ja) プロジェクタ、プログラム、情報記憶媒体および画像生成方法
EP4283986A1 (en) Electronic apparatus and control method thereof
KR20220162595A (ko) 전자 장치 및 그 제어 방법
JP3882927B2 (ja) 画像処理システム、プロジェクタおよび画像処理方法
CN113630588A (zh) 图像投射***的控制方法和图像投射***
JP2010288062A (ja) プロジェクター、プログラム、情報記憶媒体および画像投写方法
JP5445745B2 (ja) プロジェクター、プログラム、情報記憶媒体および台形歪み補正方法
JP5354163B2 (ja) プロジェクター、プログラムおよび情報記憶媒体
CN117413511A (zh) 电子装置及其控制方法
JP2012114689A (ja) プロジェクター、およびプロジェクターの制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant