CN113052781B - 图像检测方法、装置、设备、***和存储介质 - Google Patents

图像检测方法、装置、设备、***和存储介质 Download PDF

Info

Publication number
CN113052781B
CN113052781B CN201911366664.9A CN201911366664A CN113052781B CN 113052781 B CN113052781 B CN 113052781B CN 201911366664 A CN201911366664 A CN 201911366664A CN 113052781 B CN113052781 B CN 113052781B
Authority
CN
China
Prior art keywords
image
display screen
subtracted
optical lens
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911366664.9A
Other languages
English (en)
Other versions
CN113052781A (zh
Inventor
王超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201911366664.9A priority Critical patent/CN113052781B/zh
Publication of CN113052781A publication Critical patent/CN113052781A/zh
Application granted granted Critical
Publication of CN113052781B publication Critical patent/CN113052781B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0018Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for preventing ghost images
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20224Image subtraction

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

本申请实施例提供一种用于VR显示设备的图像检测方法、装置、设备、***和计算机可读存储介质,可以有效检测到鬼影。该VR显示设备包括显示屏和位于所述显示屏出光侧的光学透镜,该方法包括:当所述显示屏显示具有第一颜色的纯色图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的基础图像,所述光学透镜位于所述显示屏和所述成像位置之间;当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像,所述具有图案的图像具有第一颜色的背景色和具有第二颜色的图案;使所述待减图像和所述基础图像相减,得到检测图像。

Description

图像检测方法、装置、设备、***和存储介质
技术领域
本申请涉及虚拟现实技术领域,特别涉及一种用于VR显示设备的图像检测方法、装置、设备、***和计算机可读存储介质。
背景技术
虚拟现实(Virtual Reality,VR)技术,是利用计算机技术模拟虚拟环境,使用户获得“身临其境”的沉浸式体验。
目前,VR显示设备(例如VR眼镜)在显示过程中可能会出现“鬼影”,鬼影是指VR显示设备成像的像点附近有一个或多个与像点相似的像的存在,除了这个像点之外的其他的像被称为鬼影,鬼影会影响正常的显示,当前并没有有效检测鬼影的方法。
发明内容
本申请技术方案提供了一种用于VR显示设备的图像检测方法、装置、设备、***和计算机可读存储介质,可以有效检测到鬼影。
第一方面,本申请技术方案提供了一种用于VR显示设备的图像检测方法,所述VR显示设备包括显示屏和位于所述显示屏出光侧的光学透镜,所述方法包括:
当所述显示屏显示具有第一颜色的纯色图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的基础图像,所述光学透镜位于所述显示屏和所述成像位置之间;
当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像,所述具有图案的图像具有第一颜色的背景色和具有第二颜色的图案;
使所述待减图像和所述基础图像相减,得到检测图像。
在显示屏显示纯色图像时获取此时拍摄的基础图像,在显示屏显示图案时获取此时拍摄的待减图像,使待减图像和基础图像相减,得到检测图像,从而可以去除VR显示设备环境对拍摄的干扰,得到去除干扰后的成像图案作为检测图像,根据检测图像,可以更加准确的判断并分析鬼影,即实现了对鬼影的有效检测。
在一种可能的设计中,所述当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像的过程包括:
当所述显示屏显示图案位于第一位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第一位置待减图像;
当所述显示屏显示图案位于第二位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第二位置待减图像;
所述使所述待减图像和所述基础图像,得到检测图像的过程包括:
使所述第一位置待减图像和所述基础图像相减,得到第一检测图像;
使所述第二位置待减图像和所述基础图像相减,得到第二检测图像。
通过拍摄图案位于不同位置时的不同待减图像,可以得到该图案在不同位置时的鬼影,从而更有利于对鬼影的判断和分析。
在一种可能的设计中,所述显示屏的像素排布为n行,n≥2;
所述显示屏在n帧中逐帧显示不同图像,在同一帧中,所述显示屏所显示的图像具有1行第二颜色像素和n-1行第一颜色像素,在任意不同帧中,第二颜色像素位于不同行;
所述当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像的过程包括:
在所述n帧的第i帧中,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第i帧待减图像,i的取值为1、2、3、…、n;
所述使所述待减图像和所述基础图像,得到检测图像的过程包括:
将所述i帧待减图像和所述基础图像相减,得到第i帧检测图像,i的取值为1、2、3、…、n。
在一种可能的设计中,所述图案为点或线。
在一种可能的设计中,所述第一颜色为黑色,所述第二颜色为白色。一方面,使图案和背景之间具有较高的对比度,便于判断和分析图案;另一方面,图案所占的像素比例相对于背景所占的比例较小,因此,黑底白线条,相对于白色黑线条更不容易被忽略,即更容易判断和分析其中的图案;另一方面,通过黑色和白色两种基本颜色来形成图像,在进行分析以及图像相减等过程中,无需考虑不同颜色的影响,实现方式更加简单。
第二方面,本申请技术方案提供了一种用于VR显示设备的图像检测装置,所述VR显示设备包括显示屏和位于所述显示屏出光侧的光学透镜,所述装置包括:
第一图像获取单元,用于当所述显示屏显示具有第一颜色的纯色图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的基础图像,所述光学透镜位于所述显示屏和所述成像位置之间;
第二图像获取单元,用于当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像,所述具有图案的图像具有第一颜色的背景色和具有第二颜色的图案;
去干扰单元,用于使所述待减图像和所述基础图像相减,得到检测图像。
在一种可能的设计中,所述第二图像获取单元具体用于:
当所述显示屏显示图案位于第一位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第一位置待减图像;
当所述显示屏显示图案位于第二位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第二位置待减图像;
所述去干扰单元具体用于:
使所述第一位置待减图像和所述基础图像相减,得到第一检测图像;
使所述第二位置待减图像和所述基础图像相减,得到第二检测图像。
在一种可能的设计中,所述显示屏的像素排布为n行,n≥2;
所述显示屏在n帧中逐帧显示不同图像,在同一帧中,所述显示屏所显示的图像具有1行第二颜色像素和n-1行第一颜色像素,在任意不同帧中,第二颜色像素位于不同行;
所述第二图像获取单元具体用于,在所述n帧的第i帧中,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第i帧待减图像,i的取值为1、2、3、…、n;
所述去干扰单元具体用于,将所述i帧待减图像和所述基础图像相减,得到第i帧检测图像,i的取值为1、2、3、…、n。
在一种可能的设计中,所述图案为点或线。
在一种可能的设计中,所述第一颜色为黑色,所述第二颜色为白色。
第三方面,本申请技术方案提供了一种用于VR显示设备的图像检测设备,包括:处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现上述的方法。
第四方面,本申请技术方案提供了一种用于VR显示设备的图像检测***,包括:
VR显示设备、摄像头和上述的图像检测设备;
所述VR显示设备包括显示屏和位于所述显示屏出光侧的光学透镜;
所述光学透镜位于所述显示屏和所述摄像头之间。
第五方面,本申请技术方案提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行上述的方法。
附图说明
图1为本申请实施例中一种用于VR显示设备的图像检测***的结构示意图;
图2为图1中显示屏所显示的一种图像的示意图;
图3为图1中摄像头拍摄的一种图像的示意图;
图4为本申请实施例中一种用于VR显示设备的图像检测方法的流程图;
图5为本申请实施例中另一种用于VR显示设备的图像检测方法的流程图;
图6为本申请实施例中一种用于VR显示设备的图像检测装置的结构框图;
图7为本申请实施例中一种用于VR显示设备的图像检测设备的结构框图。
具体实施方式
本申请的实施方式部分使用的术语仅用于对本申请的具体实施例进行解释,而非旨在限定本申请。
如图1、图2、图3和图4所示,图1为本申请实施例中一种用于VR显示设备的图像检测***的结构示意图,图2为图1中显示屏所显示的一种图像的示意图,图3为图1中摄像头拍摄的一种图像的示意图,图4为本申请实施例中一种用于VR显示设备的图像检测方法的流程图,本申请实施例提供一种用于VR显示设备的图像检测方法,VR显示设备1包括显示屏11和位于显示屏11出光侧的光学透镜12,显示屏11出光侧是用于显示画面的一侧,在图1所示的结构中,出光侧为显示屏11的右侧,光学透镜12的数量可以为一个或多个,在图1中仅示意了一个。光学透镜12位于成像位置和显示屏11之间,显示屏11所显示的画面通过光学透镜12后在成像位置成像,用户在使用VR显示设备时,人眼即位于成像位置,以获得在改处的成像。在图像检测***中,摄像头2位于成像位置,用于模拟人眼拍摄显示屏11在成像位置处的成像。例如图2为显示屏11当前显示的图像,此时通过摄像头2对显示屏11所显示的图像进行拍摄,所得到的图像为图3所示,
VR显示设备中产生鬼影的原理是,显示屏11显示时的光线照射至光学透镜12,其中一部分为正常光线,穿过光学透镜12,到达成像位置,形成正常图像;另一部分为鬼影光线,在光学透镜12处被反射回显示屏11上,然后再反射并穿过光学透镜12到达成像位置,形成鬼影图像。例如,图2中显示屏所显示的图案为一条线段,而此时摄像头2所拍摄到的图案如图3所示,除了包括正常光线所形成的一条线段之外,还包括另一条线段,即由鬼影光线形成的鬼影。
上述图像检测方法包括:
步骤101、当显示屏11显示具有第一颜色的纯色图像时,获取在成像位置处拍摄的显示屏11通过光学透镜12后所呈现的基础图像,光学透镜12位于显示屏11和成像位置之间,当显示屏11显示例如纯黑色的背景图像时,由于没有图案,即便存在鬼影的问题,摄像头2所拍摄到的基础图像同样也是纯黑色的图像;
步骤102、当显示屏11显示具有图案的图像时,获取在成像位置处拍摄的显示屏11通过光学透镜12后所呈现的待减图像,具有图案的图像具有第一颜色的背景色和具有第二颜色的图案,当显示屏11显示具有图案的图像时,例如如图2中所示的图像时,如果不存在鬼影的问题,则摄像头2所拍摄到的待减图像和图2中所示的图像相同,如果存在鬼影的问题,则摄像头2所拍摄到的待减图像例如如图3所示,除了存在图2中所示的图案之外,还存在鬼影图案;
步骤103、使待减图像和基础图像相减,得到检测图像,图像相减是指两幅图像之间对应的像素做减法处理,可以得到两幅图像的差异,如果在步骤102中拍摄到的图像没有鬼影,则待减图像和基础图像相减之后仅保留图2中所示的正常图案,如果在步骤102中拍摄到的图像存在鬼影,则待减图像和基础图像相减之后会保留如图3中所示的正常图案和鬼影图案,从而可以进一步对鬼影图案进行测量和分析,以便于进一步确定产生鬼影的原因。
具体地,在VR显示设备中,例如VR眼镜中,本身会存在一些发光的位置,因此,如果单纯根据摄像头2拍摄到的具有图案的图片进行分析,并不容易识别出其中的鬼影,因此在本申请实施例中,会在显示屏11显示纯色背景时拍摄一幅对应的图像,在显示屏11显示图案时再拍摄对应的图像,两者具有相同的环境干扰,因此,对两者进行相减后,即可以得到去除环境干扰后的图案,从而可以更加准确地识别并分析鬼影。
需要说明的是,本申请实施例对于步骤101和步骤102之间的执行顺序不作限定,在其他可实现的实施方式中,可以先执行步骤102再执行步骤101。
本申请实施例中用于VR显示设备的图像检测方法,在显示屏显示纯色图像时获取此时拍摄的基础图像,在显示屏显示图案时获取此时拍摄的待减图像,使待减图像和基础图像相减,得到检测图像,从而可以去除VR显示设备环境对拍摄的干扰,得到去除干扰后的成像图案作为检测图像,根据检测图像,可以更加准确的判断并分析鬼影,即实现了对鬼影的有效检测。
可选地,如图5所示,图5为本申请实施例中另一种用于VR显示设备的图像检测方法的流程图,上述步骤102、当显示屏11显示具有图案的图像时,获取在成像位置处拍摄的显示屏11通过光学透镜12后所呈现的待减图像的过程包括:
步骤201、当显示屏11显示图案位于第一位置处的图像时,获取在成像位置处拍摄的显示屏11通过光学透镜12后所呈现的第一位置待减图像,例如,显示屏11所显示的图案为一条线段,该线段在图像最上方时进行拍摄,得到第一位置待减图像;
步骤202、当显示屏11显示图案位于第二位置处的图像时,获取在成像位置处拍摄的显示屏11通过光学透镜12后所呈现的第二位置待减图像,例如,第一位置为图像的最上方,第二位置为图像的中间,即同样的线段位于图像中间时进行拍摄,得到第二位置待减图像;
上述步骤103、使待减图像和基础图像,得到检测图像的过程包括:
步骤301、使第一位置待减图像和基础图像相减,得到第一检测图像,即可以得到线段位于最上方时对应的检测图像;
步骤302、使第二位置待减图像和基础图像相减,得到第二检测图像,即可以得到线段位于中间时对应的检测图像。
具体地,通过拍摄图案位于不同位置时的不同待减图像,可以得到该图案在不同位置时的鬼影,从而更有利于对鬼影的判断和分析。在图5所示的步骤中,仅示意了在图案位于第一位置和第二位置时分别通过拍摄得到对应的第一检测图像和第二检测图像,在其他可实现的实施方式中,可以使图案位于其他更多的位置,进而获取其他位置对应的待减图像,并通过其他位置对应的待减图像和基础图像相减,得到其他检测图像。
可选地,显示屏的像素排布为n行,n≥2,例如,可以将图1中的水平方向定义为行方向,竖直方向定义为列方向,也可以将图1中的竖直方向定义为行方向,竖直方向定义为列方向,本申请实施例对于行、列方向的定义不作限定;显示屏11在n帧中逐帧显示不同图像,在同一帧中,显示屏11所显示的图像具有1行第二颜色像素和n-1行第一颜色像素,在任意不同帧中,第二颜色像素位于不同行;
上述步骤102、当显示屏11显示具有图案的图像时,获取在成像位置处拍摄的显示屏11通过光学透镜12后所呈现的待减图像的过程包括:
在n帧的第i帧中,获取在成像位置处拍摄的显示屏11通过光学透镜12后所呈现的第i帧待减图像,i的取值为1、2、3、…、n;
例如,在第1帧中,显示屏11显示的图像中,第1行像素为白色,其他行像素为黑色,即在黑色背景下在第1行的位置显示白色直线,此时摄像头2拍摄得到对应的第1帧待减图像;在第2帧中,显示屏11显示的图像中,第2行像素为白色,其他行像素为黑色,即在黑色背景下在第2行的位置显示白色直线,此时摄像头2拍摄得到对应的第2帧待减图像;在第3帧中,显示屏11显示的图像中,第3行像素为白色,其他行像素为黑色,即在黑色背景下在第3行的位置显示白色直线,此时摄像头2拍摄得到对应的第3帧待减图像;依次类推,直到在第n帧中,显示屏11显示的图像中,第n行像素为白色,其他行像素为黑色,即在黑色背景下在第n行的位置显示白色直线,此时摄像头2拍摄得到对应的第n帧待减图像。即实现了逐行显示白色直线并拍摄得到对应的待减图像。
上述步骤103、使待减图像和基础图像,得到检测图像的过程包括:将i帧待减图像和基础图像相减,得到第i帧检测图像,i的取值为1、2、3、…、n。
例如,将第1帧待减图像和基础图像相减,得到第1帧检测图像,第1帧检测图像用于反映白色直线位于第1行时的鬼影;将第2帧待减图像和基础图像相减,得到第2帧检测图像,第2帧检测图像用于反映白色直线位于第2行时的鬼影;将第3帧待检测图像和基础图像相减,得到第3帧检测图像,第3帧检测图像用于反映白色直线位于第3行时的鬼影;依次类推,直到将第n帧待检测图像和基础图像相减,得到第n帧检测图像,第n帧检测图像用于反映白色直线位于第n行时的鬼影。
另外需要说明的是,在上述步骤102和步骤103中,可以在步骤102全部执行之后,再执行步骤103,也可以两者共同执行,例如,在第1帧中,显示屏11显示的图像中,第1行像素为白色,其他行像素为黑色,此时摄像头2拍摄得到对应的第1帧待减图像,并使第1帧待减图像和基础图像相减,得到第1帧检测图像;然后进入第2帧,显示屏11显示的图像中,第2行像素为白色,其他行像素为黑色,此时摄像头2拍摄得到对应的第2帧待减图像,并使第2帧待减图像和基础图像相减,得到第2帧检测图像;以此类推,直到在第n帧,显示屏11显示的图像中,第n行像素为白色,其他行像素为黑色,此时摄像头2拍摄得到对应的第n帧待减图像,并使第n帧待减图像和基础图像相减,得到第n帧检测图像,即完成了整个步骤102和步骤103。
可选地,上述图案为点或线。
具体地,例如,当上述图案为点时,该点可以为一个像素对应的像素点,也可以为由多个相邻像素组成的点,在上述步骤102中,显示屏11在不同的位置显示该点,同时在该点位于不同位置时,分别获取由摄像头2拍摄的不同的待减图像,在上述步骤103中,分别将每一幅待减图像和基础图像相减,得到对应的检测图像,用于分别反映该点位于不同位置时的鬼影。当上述图案为线时,该线可以为一行像素或一列像素对应的直线,也可以为由相邻多行像素组成的直线,或者为由相邻多列像素组成的直线。设置图案为点或者线,更容易确定图案中不同部分的准确坐标,且可以遍历图像中的所有位置来设置图案,便于整体分析不同位置处的鬼影。可以理解,在其他可以实现的实施方式中,也可以设置其他形状的图案。
可选地,上述第一颜色为黑色,上述第二颜色为白色。
具体地,第一颜色为背景色,第二颜色为图案颜色,一方面,使图案和背景之间具有较高的对比度,便于判断和分析图案;另一方面,图案所占的像素比例相对于背景所占的比例较小,因此,黑底白线条,相对于白色黑线条更不容易被忽略,即更容易判断和分析其中的图案;另一方面,通过黑色和白色两种基本颜色来形成图像,在进行分析以及图像相减等过程中,无需考虑不同颜色的影响,实现方式更加简单。可以理解,在其他可以实现的实施方式中,也可以设置第一颜色为黑色之外的其他颜色,设置第二颜色为白色之外的其他颜色,只要保证第一颜色和第二颜色不同,能够区分出背景中的图案即可。
如图1至图6所示,图6为本申请实施例中一种用于VR显示设备的图像检测装置的结构框图,本申请实施例还提供一种用于VR显示设备的图像检测装置,VR显示设备包括显示屏11和位于显示屏11出光侧的光学透镜12,装置包括:第一图像获取单元31,用于当显示屏显示具有第一颜色的纯色图像时,获取在成像位置处拍摄的显示屏通过光学透镜后所呈现的基础图像,光学透镜位于显示屏和成像位置之间;第二图像获取单元32,用于当显示屏显示具有图案的图像时,获取在成像位置处拍摄的显示屏通过光学透镜后所呈现的待减图像,具有图案的图像具有第一颜色的背景色和具有第二颜色的图案;去干扰单元33,用于使待减图像和基础图像相减,得到检测图像。
具体地,该用于VR显示设备的图像检测装置可以应用上述实施例中的图像检测方法以及VR显示设备,具体工作过程和原理可以与上述实施例中的描述相同,在此不再赘述。
本申请实施例中用于VR显示设备的图像检测装置,在显示屏显示纯色图像时获取此时拍摄的基础图像,在显示屏显示图案时获取此时拍摄的待减图像,使待减图像和基础图像相减,得到检测图像,从而可以去除VR显示设备环境对拍摄的干扰,得到去除干扰后的成像图案作为检测图像,根据检测图像,可以更加准确的判断并分析鬼影,即实现了对鬼影的有效检测。
可选地,第二图像获取单元32具体用于:当显示屏显示图案位于第一位置处的图像时,获取在成像位置处拍摄的显示屏通过光学透镜后所呈现的第一位置待减图像;当显示屏显示图案位于第二位置处的图像时,获取在成像位置处拍摄的显示屏通过光学透镜后所呈现的第二位置待减图像;去干扰单元33具体用于:使第一位置待减图像和基础图像相减,得到第一检测图像;使第二位置待减图像和基础图像相减,得到第二检测图像。
可选地,显示屏的像素排布为n行,n≥2;显示屏在n帧中逐帧显示不同图像,在同一帧中,显示屏所显示的图像具有1行第二颜色像素和n-1行第一颜色像素,在任意不同帧中,第二颜色像素位于不同行;第二图像获取单元32具体用于,在n帧的第i帧中,获取在成像位置处拍摄的显示屏通过光学透镜后所呈现的第i帧待减图像,i的取值为1、2、3、…、n;去干扰单元33具体用于,将i帧待减图像和基础图像相减,得到第i帧检测图像,i的取值为1、2、3、…、n。
可选地,上述图案为点或线。
可选地,第一颜色为黑色,第二颜色为白色。
应理解以上图6所示图像检测装置的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现;也可以全部以硬件的形式实现;还可以部分模块以软件通过处理元件调用的形式实现,部分模块通过硬件的形式实现。例如,确定模块可以为单独设立的处理元件,也可以集成在图像检测装置,例如终端的某一个芯片中实现,此外,也可以以程序的形式存储于图像检测装置的存储器中,由通信装置的某一个处理元件调用并执行以上各个模块的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起,也可以独立实现。这里所述的处理元件可以是一种集成电路,具有信号的处理能力。在实现过程中,上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
例如,以上这些模块可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个特定集成电路(Application Specific Integrated Circuit,ASIC),或,一个或多个微处理器(digital singnal processor,DSP),或,一个或者多个现场可编程门阵列(Field Programmable Gate Array,FPGA)等。再如,当以上某个模块通过处理元件调度程序的形式实现时,该处理元件可以是通用处理器,例如中央处理器(Central ProcessingUnit,CPU)或其它可以调用程序的处理器。再如,这些模块可以集成在一起,以片上***(system-on-a-chip,SOC)的形式实现。
如图7所示,图7为本申请实施例中一种用于VR显示设备的图像检测设备的结构框图,本申请实施例还提供一种用于VR显示设备的图像检测设备,包括:处理器41和存储器42,存储器42用于存储至少一条指令,指令由处理器41加载并执行时以实现如上述实施例中的图像检测方法。
处理器41的数量可以为一个或多个,图7中以一个处理器41为例,处理器41和存储器42可以通过总线或者其他方式连接。
存储器42作为一种非暂态计算机可读存储介质,可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块,如本申请实施例中的图像检测方法对应的程序指令/模块。处理器41通过运行存储在存储器42中的非暂态软件程序、指令以及模块,从而执行各种功能应用以及数据处理,即实现上述任意方法实施例中的方法。
存储器42可以包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需要的应用程序;以及必要数据等。此外,存储器42可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。
该图像检测设备例如可以为计算机。
本申请实施例中用于VR显示设备的图像检测设备,在显示屏显示纯色图像时获取此时拍摄的基础图像,在显示屏显示图案时获取此时拍摄的待减图像,使待减图像和基础图像相减,得到检测图像,从而可以去除VR显示设备环境对拍摄的干扰,得到去除干扰后的成像图案作为检测图像,根据检测图像,可以更加准确的判断并分析鬼影,即实现了对鬼影的有效检测。
如图1所示,本申请实施例还提供一种图像检测***,包括:VR显示设备1、摄像头2和上述的图像检测设备(图1中未示出);VR显示设备1包括显示屏11和位于显示屏11出光侧的光学透镜12;光学透镜12位于显示屏11和摄像头2之间。
其中,图像检测设备可以在进行图像检测的同时对VR显示设备1的显示屏11进行控制,例如,图像检测设备可以电连接于显示屏11和摄像头2,然后在实现上述图像检测方法的过程中,首先,向显示屏11提供其所需要显示的图像数据,控制显示屏11显示对应的纯色图像或者具有图案的图像,在控制显示屏11显示对应图像的同时,控制摄像头2进行拍摄,以获取对应的基础图像或者待减图像。
本申请实施例中用于VR显示设备的图像检测***,在显示屏显示纯色图像时获取此时拍摄的基础图像,在显示屏显示图案时获取此时拍摄的待减图像,使待减图像和基础图像相减,得到检测图像,从而可以去除VR显示设备环境对拍摄的干扰,得到去除干扰后的成像图案作为检测图像,根据检测图像,可以更加准确的判断并分析鬼影,即实现了对鬼影的有效检测。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行上述实施例的图像检测方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid StateDisk)等。
本申请实施例中,“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示单独存在A、同时存在A和B、单独存在B的情况。其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项”及其类似表达,是指的这些项中的任意组合,包括单项或复数项的任意组合。例如,a,b和c中的至少一项可以表示:a,b,c,a-b,a-c,b-c,或a-b-c,其中a,b,c可以是单个,也可以是多个。
以上仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (13)

1.一种用于VR显示设备的图像检测方法,其特征在于,
所述VR显示设备包括显示屏和位于所述显示屏出光侧的光学透镜,所述方法包括:
当所述显示屏显示具有第一颜色的纯色图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的基础图像,所述光学透镜位于所述显示屏和所述成像位置之间;
当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像,所述具有图案的图像具有第一颜色的背景色和具有第二颜色的图案;
使所述待减图像和所述基础图像相减,得到检测图像。
2.根据权利要求1所述的方法,其特征在于,
所述当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像的过程包括:
当所述显示屏显示图案位于第一位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第一位置待减图像;
当所述显示屏显示图案位于第二位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第二位置待减图像;
所述使所述待减图像和所述基础图像相减,得到检测图像的过程包括:
使所述第一位置待减图像和所述基础图像相减,得到第一检测图像;
使所述第二位置待减图像和所述基础图像相减,得到第二检测图像。
3.根据权利要求1所述的方法,其特征在于,
所述显示屏的像素排布为n行,n≥2;
所述显示屏在n帧中逐帧显示不同图像,在同一帧中,所述显示屏所显示的图像具有1行第二颜色像素和n-1行第一颜色像素,在任意不同帧中,第二颜色像素位于不同行;
所述当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像的过程包括:
在所述n帧的第i帧中,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第i帧待减图像,i的取值为1、2、3、…、n;
所述使所述待减图像和所述基础图像相减,得到检测图像的过程包括:
将所述第i帧待减图像和所述基础图像相减,得到第i帧检测图像,i的取值为1、2、3、…、n。
4.根据权利要求1或2所述的方法,其特征在于,
所述图案为点或线。
5.根据权利要求1至3中任意一项所述的方法,其特征在于,
所述第一颜色为黑色,所述第二颜色为白色。
6.一种用于VR显示设备的图像检测装置,其特征在于,
所述VR显示设备包括显示屏和位于所述显示屏出光侧的光学透镜,所述装置包括:
第一图像获取单元,用于当所述显示屏显示具有第一颜色的纯色图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的基础图像,所述光学透镜位于所述显示屏和所述成像位置之间;
第二图像获取单元,用于当所述显示屏显示具有图案的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的待减图像,所述具有图案的图像具有第一颜色的背景色和具有第二颜色的图案;
去干扰单元,用于使所述待减图像和所述基础图像相减,得到检测图像。
7.根据权利要求6所述的装置,其特征在于,
所述第二图像获取单元具体用于:
当所述显示屏显示图案位于第一位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第一位置待减图像;
当所述显示屏显示图案位于第二位置处的图像时,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第二位置待减图像;
所述去干扰单元具体用于:
使所述第一位置待减图像和所述基础图像相减,得到第一检测图像;
使所述第二位置待减图像和所述基础图像相减,得到第二检测图像。
8.根据权利要求6所述的装置,其特征在于,
所述显示屏的像素排布为n行,n≥2;
所述显示屏在n帧中逐帧显示不同图像,在同一帧中,所述显示屏所显示的图像具有1行第二颜色像素和n-1行第一颜色像素,在任意不同帧中,第二颜色像素位于不同行;
所述第二图像获取单元具体用于,在所述n帧的第i帧中,获取在成像位置处拍摄的所述显示屏通过所述光学透镜后所呈现的第i帧待减图像,i的取值为1、2、3、…、n;
所述去干扰单元具体用于,将所述第i帧待减图像和所述基础图像相减,得到第i帧检测图像,i的取值为1、2、3、…、n。
9.根据权利要求6或7所述的装置,其特征在于,
所述图案为点或线。
10.根据权利要求6至8中任意一项所述的装置,其特征在于,
所述第一颜色为黑色,所述第二颜色为白色。
11.一种用于VR显示设备的图像检测设备,其特征在于,包括:
处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现如权利要求1至5中任意一项所述的方法。
12.一种用于VR显示设备的图像检测***,其特征在于,包括:
VR显示设备、摄像头和如权利要求11所述的图像检测设备;
所述VR显示设备包括显示屏和位于所述显示屏出光侧的光学透镜;
所述光学透镜位于所述显示屏和所述摄像头之间。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行如权利要求1至5中任意一项所述的方法。
CN201911366664.9A 2019-12-26 2019-12-26 图像检测方法、装置、设备、***和存储介质 Active CN113052781B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911366664.9A CN113052781B (zh) 2019-12-26 2019-12-26 图像检测方法、装置、设备、***和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911366664.9A CN113052781B (zh) 2019-12-26 2019-12-26 图像检测方法、装置、设备、***和存储介质

Publications (2)

Publication Number Publication Date
CN113052781A CN113052781A (zh) 2021-06-29
CN113052781B true CN113052781B (zh) 2024-04-12

Family

ID=76506510

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911366664.9A Active CN113052781B (zh) 2019-12-26 2019-12-26 图像检测方法、装置、设备、***和存储介质

Country Status (1)

Country Link
CN (1) CN113052781B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1258171A (zh) * 1998-12-16 2000-06-28 索尼公司 图像合成设备及图像处理设备
CN101848369A (zh) * 2009-12-04 2010-09-29 四川川大智胜软件股份有限公司 一种基于自适应双背景模型的视频禁停事件检测方法
JP2011205531A (ja) * 2010-03-26 2011-10-13 Fujifilm Corp 立体撮像装置、ゴースト像処理装置およびゴースト像処理方法
JPWO2011108207A1 (ja) * 2010-03-01 2013-06-20 コニカミノルタ株式会社 ゴースト検出装置およびそれを用いる撮像装置、ゴースト検出方法、および、ゴースト除去方法
CN109119009A (zh) * 2017-06-26 2019-01-01 深圳回收宝科技有限公司 屏幕缺陷检测方法、检测设备、***及存储介质
CN109120862A (zh) * 2018-10-15 2019-01-01 Oppo广东移动通信有限公司 高动态范围图像获取方法、装置及移动终端

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011108207A (ja) * 2009-11-20 2011-06-02 Mitsumi Electric Co Ltd 操作入力装置及び操作入力検出装置
JP2020502709A (ja) * 2016-12-13 2020-01-23 ディープモーション、インコーポレイテッド ソルバーに複数の力アレイを使用した改良型仮想現実システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1258171A (zh) * 1998-12-16 2000-06-28 索尼公司 图像合成设备及图像处理设备
CN101848369A (zh) * 2009-12-04 2010-09-29 四川川大智胜软件股份有限公司 一种基于自适应双背景模型的视频禁停事件检测方法
JPWO2011108207A1 (ja) * 2010-03-01 2013-06-20 コニカミノルタ株式会社 ゴースト検出装置およびそれを用いる撮像装置、ゴースト検出方法、および、ゴースト除去方法
JP2011205531A (ja) * 2010-03-26 2011-10-13 Fujifilm Corp 立体撮像装置、ゴースト像処理装置およびゴースト像処理方法
CN109119009A (zh) * 2017-06-26 2019-01-01 深圳回收宝科技有限公司 屏幕缺陷检测方法、检测设备、***及存储介质
CN109120862A (zh) * 2018-10-15 2019-01-01 Oppo广东移动通信有限公司 高动态范围图像获取方法、装置及移动终端

Also Published As

Publication number Publication date
CN113052781A (zh) 2021-06-29

Similar Documents

Publication Publication Date Title
US10547833B2 (en) Camera calibration system, target, and process
US20200389575A1 (en) Under-display image sensor
CN111345029B (zh) 一种目标追踪方法、装置、可移动平台及存储介质
JP7337091B2 (ja) 飛行時間カメラの低減された出力動作
JP2019504522A (ja) ステレオカメラと構造化光とを用いたヘッドマウントディスプレイを伴う奥行きマッピング
CN110519585B (zh) 一种应用于图像采集设备的成像校准方法及装置
US10397498B2 (en) Compressive sensing capturing device and method
WO2015112652A1 (en) Image demosaicing
US10178381B2 (en) Depth-spatial frequency-response assessment
CN110572636B (zh) 摄像头脏污检测方法、装置、存储介质及电子设备
US8929685B2 (en) Device having image reconstructing function, method, and recording medium
JP2019219273A (ja) 画像生成装置および画像生成方法
US20220237854A1 (en) Adaptive virtual camera sensor
CN106331460A (zh) 一种图像处理方法、装置及终端
Kuciš et al. Simulation of camera features
CN104184936B (zh) 基于光场相机的影像对焦处理方法及其***
TWI751869B (zh) 運算裝置及用於近眼顯示裝置之缺陷偵測方法
CN113052781B (zh) 图像检测方法、装置、设备、***和存储介质
AU2020408599A1 (en) Light field reconstruction method and system using depth sampling
JP2007315777A (ja) 三次元形状計測システム
CN110708537B (zh) 图像传感器性能测试方法及装置、存储介质
JP2018081378A (ja) 画像処理装置、撮像装置、画像処理方法および画像処理プログラム
TW201809671A (zh) 一種光流測速模組與其測速方法
CN111479074A (zh) 图像采集方法、装置、计算机设备和存储介质
Perezyabov et al. Comparative analysis of resolution measurement methods for the optoelectronic systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant