CN108810504A - 图像处理方法、投影方法及设备 - Google Patents

图像处理方法、投影方法及设备 Download PDF

Info

Publication number
CN108810504A
CN108810504A CN201810996978.6A CN201810996978A CN108810504A CN 108810504 A CN108810504 A CN 108810504A CN 201810996978 A CN201810996978 A CN 201810996978A CN 108810504 A CN108810504 A CN 108810504A
Authority
CN
China
Prior art keywords
image
resolution
pixel
projected
human eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810996978.6A
Other languages
English (en)
Inventor
杨乐宝
王小赛
崔中秋
陶淑林
宋乐乐
王俊皓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Goertek Optical Technology Co Ltd
Original Assignee
Goertek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Goertek Inc filed Critical Goertek Inc
Priority to CN201810996978.6A priority Critical patent/CN108810504A/zh
Publication of CN108810504A publication Critical patent/CN108810504A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请实施例提供一种图像处理方法、一种投影方法及设备,该图像图里方法包括:获取第一分辨率的待处理图像;将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像;其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率;将所述第二分辨率的待处理图像作为待投影图像;其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。本申请实施例通过低分辨率的投影设备实现在人眼中投影获得更高分辨率的投影图像的效果。

Description

图像处理方法、投影方法及设备
技术领域
本申请实施例涉及虚拟现实技术领域,尤其涉一种图像处理方法、一种投影方法及设备。
背景技术
现有AR(增强现实,Augmented Reality)图像投影技术中,通过投影设备将虚拟图像投影到人眼中,投影至人眼中的虚拟图像与入射至人眼中的现实图像叠加,从而获得虚拟现实效果。
目前低分辨率的投影设备无法投影出更高分辨率的图像。例如,投影设备的分辨率为1280*720,待投影的虚拟图像具有更高的分辨率,例如为1980*1080P。由于投影设备最多只能扫描1280*720个像素点,因此,当待投影的虚拟图像的分辨率为1980*1080P,投影设备投影获得的投影图像会损失原有待扫描虚拟图像中的部分像素信息,无法投影获得分辨率更高的投影图像。
发明内容
本申请实施例提供一种图像处理方法,图像投影方法、一种图像处理设备及一种投影设备,用以实现通过低分辨率的投影设备在人眼中投影获得更高分辨率的投影图像的效果。
本申请提供了一种图像处理方法,包括:
获取第一分辨率的待处理图像;
将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像;其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率;
将所述第二分辨率的待处理图像作为待投影图像;其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。
优选地,所述将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像包括:
将所述第一分辨率的待处理图像按照人眼视度划分为多个像素区间;
将所述第一分辨率的待处理图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的分布规律依次调整每个像素区间的像素密度,使调整后的待处理图像的分辨率为与所述投影设备分辨率适配的第二分辨率。
优选地,所述将所述第一分辨率的待处理图像按照人眼视度划分为多个像素区间包括:
确定所述第一分辨率的待处理图像对应人眼两度视场对应的第一像素区域;
确定所述第一分辨率的待处理图像对应人眼两度视场到十度视场对应的第二像素区域;
确定所述第一分辨率的待处理图像对应人眼大于十度的视场对应的第三像素区域。
优选地,所述将所述第一分辨率的待处理图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的分布规律依次调整每个像素区间的像素密度,使调整后的待处理图像的分辨率为与所述投影设备分辨率适配的第二分辨率包括:
使所述第一分辨率的待处理图像的第一像素区域的像素密度保持不变,保持为第一像素密度;
调整所述第一分辨率的待处理图像的第二像素区域的像素密度由所述第一像素密度降低为第二像素密度;
调整所述第一分辨率的待处理图像的第三像素区域的像素密度由所述第一像素密度降低为第三像素密度;其中,所述第二像素密度大于所述第三像素密度,且使得调整后的待处理图像的分辨率为所述第二分辨率。
本申请提供了一种投影方法,包括:
获取待投影图像;其中,所述待投影图像是通过将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像后获得的;所述待投影图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布;
根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中,以投影获得人眼中心视场像素密度高、人眼边缘视场像素密度低的待投影图像。
优选地,所述根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中包括:
根据所述待投影图像的像素分布规律,将所述待投影图像划分为多个扫描区间;
根据每个扫描区间的像素分布密度,调整每个扫描区间对应激光器的点亮时序及对应扫描振镜的运转速度;
控制所述激光器按照每个扫描区间对应的激光器的点亮时序点亮的同时,控制所述扫描振镜按照每个扫描区间对应扫描振镜的运转速度运转,将所述待投影图像投影至人眼中。
优选地,所述根据所述待投影图像的像素分布规律,将所述待投影图像划分为多个扫描区间包括:
确定所述待投影图像对应人眼两度视场对应的第一扫描区间;
确定所述待投影图像对应人眼两度视场到十度视场对应的第二扫描区间;
确定所述待投影图像对应人眼大于十度的视场对应的第三扫描区间。
优选地,所述根据每个扫描区间的像素分布密度,调整每个扫描区间对应激光器的点亮时序及对应扫描振镜的运转速度包括:
根据第一扫描区间的像素分布密度,调整所述第一扫描区间对应激光器点亮的时间间隔最短及对应扫描振镜慢轴的运转速度最慢;
根据第二扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔次短及对应扫描振镜慢轴的运转速度次慢;
根据第三扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔最长及对应扫描振镜慢轴的运转速度最快。
本申请提供了一种图像处理设备,包括处理组件和存储组件;所述存储组件存储一条或多条计算机程序指令;所述处理组件用于调用并执行所述一条或多条计算机程序指令以实现:
获取第一分辨率的待处理图像;
将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像;其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率;
将所述第二分辨率的待处理图像作为待投影图像;其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。
本申请还提供了一种投影设备,包括处理组件和存储组件;所述存储组件存储一条或多条计算机程序指令;所述处理组件用于调用并执行所述一条或多条计算机程序指令以实现:
获取待投影图像;其中,所述待投影图像是通过将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像后获得的;所述待投影图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布;
根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中,以投影获得人眼中心视场像素密度高、人眼边缘视场像素密度低的待投影图像。
本申请实施实例提供了一种图像处理方法、一种投影方法及设备,所述图像处理方法通过获取第一分辨率的待处理图像并将所述第一分辨率的待处理图像转换为与投影设备适配的第二分辨率的待处理图像。其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率。将所述第二分辨率的待处理图像作为待投影图像,其中投影设备用于将所述待投影图像按照待投影图像的像素分布规律投影至人眼中。由于人眼中心视场的对待投影图像分辨率感知最清晰,越靠近边缘视场对待投影图像分辨率的感知越模糊。因此,将所述待投影图像按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低投影到人眼中时,人眼感知到的待投影图形的分辨率为对应人眼中心视场区域的分辨率,此时对应人眼中心视场区域的像素分布密度越高人眼感知到的待投影图像的分辨率越高,从而实现通过低分辨率的投影设备在人眼中投影获得更高分辨率的投影图像的效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请提供的一种图像处理方法的一个实施例的流程图;
图2示出了本申请提供的一种投影方法的一个实施例的流程图;
图3示出了本申请提供的一种图像处理装置的一个实施例的结构示意图;
图4示出了本申请提供的一种投影装置的一个实施例的结构示意图;
图5示出了本申请提供的一种图像处理设备的一个实施例的结构示意图;
图6示出了本申请提供的一种投影设备的一个实施例的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
在本申请的说明书和权利要求书及上述附图中的描述的一些流程中,包含了按照特定顺序出现的多个操作,但是应该清楚了解,这些操作可以不按照其在本文中出现的顺序来执行或并行执行,操作的序号如101、102等,仅仅是用于区分开各个不同的操作,序号本身不代表任何的执行顺序。另外,这些流程可以包括更多或更少的操作,并且这些操作可以按顺序执行或并行执行。需要说明的是,本文中的“第一”、“第二”等描述,是用于区分不同的消息、设备、模块等,不代表先后顺序,也不限定“第一”和“第二”是不同的类型。
目前低分辨率的投影设备无法投影出更高分辨率的图像。为了使用户获得更好地观看体验,通过低分辨率的投影设备可以看到更高清的投影图像。发明人经过一系列的研究发现,现有的投影方法是在获得待投影图像后在人眼中投影出一幅等像素尺寸的虚拟图像。由于待投影图像的像素的是均匀分布的,因此投影至人眼中的虚拟图像的像素同样是在人眼中均匀分布,但这种投影方法没有考虑的人眼的特性。由于人眼的视网膜中感知色彩信息的视锥细胞在视网膜上的分布是不均匀的,其分布情况为在人眼视网膜小凹附近两度视场中是锥细胞分布密度最高,远离两度视场位置的是锥细胞密度逐渐降低,也即人眼对投影至两度视场内的像素最敏感,感知度最高,大于两度视场的像素的感知度会越来越低,且投影至距两度视场越远的视场时人眼就会看不清投影图像的细节。
因此,本申请实施实例提供了一种图像处理方法、一种投影方法及设备,所述图像处理方法通过获取第一分辨率的待处理图像并将所述第一分辨率的待处理图像转换为与投影设备适配的第二分辨率的待处理图像。其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率。将所述第二分辨率的待处理图像作为待投影图像,其中投影设备用于将所述待投影图像按照待投影图像的像素分布规律投影至人眼中。由于人眼中心视场的对待投影图像分辨率感知最清晰,越靠近边缘视场对待投影图像分辨率的感知越模糊。因此,将所述待投影图像按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低投影到人眼中时,人眼感知到的待投影图形的分辨率为对应人眼中心视场区域的分辨率,此时对应人眼中心视场区域的像素分布密度越高人眼感知到的待投影图像的分辨率越高,从而实现通过低分辨率的投影设备在人眼中投影获得更高分辨率的投影图像的效果。
下面将结合附图对本申请技术方案进行详细描述。
图1为本申请实施例提供的一种图像处理方法的一个实施例的流程图。该图像处理方法可以包括:
101:获取第一分辨率的待处理图像。
102:将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像。
其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率。
103:将所述第二分辨率的待处理图像作为待投影图像。
其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。
实际应用中,图像尺寸相同时,图像分辨率的大小与图像的像素个数相关,当像素分布个数越多即像素密度越高图像分辨率就越高,反之图像分辨率就越低。
通过将第一分辨率的待处理图像转换为按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布第二分辨率的到处理图像。虽然待处理图像的分辨率降低了,但根据人眼视觉特性,当将该第二分辨率的待处理图像作为待投影图像投影至人眼中时,人眼感知到待投影图像的分辨率为对应中心视场的像素分布密度对应的分辨率。因此,使得第二分辨率的待处理图像与人眼中心视场对应区域的像素密度达到第一分辨率即可使用户感知到的投影至人眼中图像的分辨率为第一分辨率。
作为一种可选地实施方式,所述将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像可以包括:
将所述第一分辨率的待处理图像按照人眼视度划分为多个像素区间;
将所述第一分辨率的待处理图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的分布规律依次调整每个像素区间的像素密度,使调整后的待处理图像的分辨率为与所述投影设备分辨率适配的第二分辨率。
根据人眼视觉特性,可以将第一分辨率的待处理图像按照人眼视度进行划分,根据人眼视场对投影图像的敏感度不同,划分为多个像素区间,并调整每个像素区间的像素密度,使得每个像素区间的像素密度不同。具体地,可以将对应人眼中心视场的像素区间的像素密度不变,依次降低对应人眼边缘视场的像素区间的像素密度,可以通过合并相邻像素点的方式,减少相应像素区间内的像素个数,达到降低该像素区间对应像素密度的目的。
作为一种可选地实施方式,所述将所述第一分辨率的待处理图像按照人眼视度划分为多个像素区间可以包括:
确定所述第一分辨率的待处理图像对应人眼两度视场对应的第一像素区域;
确定所述第一分辨率的待处理图像对应人眼两度视场到十度视场对应的第二像素区域;
确定所述第一分辨率的待处理图像对应人眼大于十度的视场对应的第三像素区域。
实际应用中,根据人眼视度对投影图像的敏感度可以分为两度视场,两度到十度视场及大于十度的视场,当然,本申请实施例并不限于这种划分方式,为了获得更好的投影效果可以进行一步细化人眼视度对应的像素区间,也可以仅划分为两度视场及大于两度视场对应的像素区间,可根据实际需求进行像素区间划分,在此不做具体限定。
作为一种可选地实施方式,所述将所述第一分辨率的待处理图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的分布规律依次调整每个像素区间的像素密度,使调整后的待处理图像的分辨率为与所述投影设备分辨率适配的第二分辨率可以包括:
使所述第一分辨率的待处理图像的第一像素区域的像素密度保持不变,保持为第一像素密度;
调整所述第一分辨率的待处理图像的第二像素区域的像素密度由所述第一像素密度降低为第二像素密度;
调整所述第一分辨率的待处理图像的第三像素区域的像素密度由所述第一像素密度降低为第三像素密度;其中,所述第二像素密度大于所述第三像素密度,且使得调整后的待处理图像的分辨率为所述第二分辨率。
以第一分辨率的待处理图像的分辨率为1980*1080为例,由于投影设备最多只能扫描1280*720个像素点,因此如果投影设备直接投影该第一分辨率待处理图像,投影到人眼中的图像的分辨率即为1280*720,无法投影获得更高分辨率的图像。采用本申请实施例的技术方案,将第一分辨率的待处理图像划分为对应人眼两度视场的第一像素区间,对应人眼两度到十度视场的第二像素区间及对应人眼大于十度视场的第三像素区间。然后,保持第一像素区间的像素密度不变,因此第一像素区间的分辨率仍为1980*1080;降低第二像素区间的像素密度为第二像素密度,使得第二像素区间的分辨率为1280*720;调整所述第一分辨率的待处理图像的第三像素区域的像素密度由所述第一像素密度降低为第三像素密度,使得第三像素区间的分辨率为640*480,从而获得第二分辨率的待处理图像,且使得第二分辨率小于或等于该投影设备的分辨率。
实际中根据实际需求划分获得多个像素区间后,各像素区间的像素密度的调整可根据实际用户的观看需求进行调整,只要满足对应人眼中心视场的像素区间的分辨率满足较高的分辨率,即可在投影时使用户感知到更高分辨率的投影图像,使用户获得更好的视觉体验。
本申请实施例中,通过将第一分辨率的待处理图像转换与投影设备分辨率适配的第二分辨率的待处理图像,且使得第二分辨率的待处理图像的像素按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低分布。获得符合人眼视觉特性的待投影图像,为投影设备实现投影获得更高分辨率的投影图像的效果奠定了基础。
图2为本申请实施例提供的一种投影方法的一个实施例的流程图。该投影方法可以包括:
201:获取待投影图像。
其中,所述待投影图像是通过将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像后获得的;所述待投影图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布。
202:根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中,以投影获得人眼中心视场像素密度高、人眼边缘视场像素密度低的待投影图像。
由于现有投影设备的激光器的点亮时序和扫描振镜运转速度仅适用于扫描等像素尺寸的图像,将等像素尺寸的图像投影至人眼中。由于待投影图是按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布的,是非等像素尺寸的图像。因此要通过投影设备投影获得该待投影图像,需要调整投影设备的激光器的点亮时序及扫描振镜的运转速度。
实际应用中,投影设备的激光器可以是RGB三色激光器,在此不做具体限定。
作为一种可选地实施方式,所述根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中包括:
根据所述待投影图像的像素分布规律,将所述待投影图像划分为多个扫描区间;
根据每个扫描区间的像素分布密度,调整每个扫描区间对应激光器的点亮时序及对应扫描振镜的运转速度;
控制所述激光器按照每个扫描区间对应的激光器的点亮时序点亮的同时,控制所述扫描振镜按照每个扫描区间对应扫描振镜的运转速度运转,将所述待投影图像投影至人眼中。
由于待投影图像的像素密度分布规律是按照人眼视觉特性调整的,因此根据人眼视觉特性同样可以将该待扫描图像划分为多个扫描区间。根据不同扫描区间内像素的分布密度不同,调整每一个扫描区间对应的激光器的点亮时序及扫描振镜的扫描速度。
实际中,扫描振镜快轴在水平方向的运转速度可以不变,仅通过调整激光器的点亮时序即可调整每一行中点亮的像素个数及相邻像素的横向间隔距离,从而实现待投影图像对应中心视场的扫描区间的分辨率高,对应边缘视场的扫描区间的分辨率低。
但现有扫描振镜慢轴在垂直方向的运转速度为匀速运动,这就会导致每行像素之间的纵向间隔距离相同。由于待投影图像各扫描区间的像素分布密度不同,使得每个扫描区间中相邻像素不仅横向间隔距离不同,其纵向间隔距离也不相同。且扫描振镜快轴的运转速度不变,因此扫描振镜扫描一行的时间时固定的,通过调整扫描振镜慢轴的运转速度为非线性运动,使得扫描振镜慢轴边缘运动速度快,此时在相同扫描时间内,扫描振镜快轴扫描的行数就会越少;同时调整扫描振镜慢轴中心运动速度慢,此时在相同扫描时间内,扫描振镜快轴扫描的行数就会越多。这样就会投影获得位于待投影图像边缘的像素稀疏,位于待投影图像中心像素密集,从而实现待投影图像对应中心视场的扫描区间的分辨率高,对应边缘视场的扫描区间的分辨率低。
作为一种可选地实施方式,所述根据所述待投影图像的像素分布规律,将所述待投影图像划分为多个扫描区间包括:
确定所述待投影图像对应人眼两度视场对应的第一扫描区间;
确定所述待投影图像对应人眼两度视场到十度视场对应的第二扫描区间;
确定所述待投影图像对应人眼大于十度的视场对应的第三扫描区间。
作为一种可选地实施方式,所述根据每个扫描区间的像素分布密度,调整每个扫描区间对应激光器的点亮时序及对应扫描振镜的运转速度包括:
根据第一扫描区间的像素分布密度,调整所述第一扫描区间对应激光器点亮的时间间隔最短及对应扫描振镜慢轴的运转速度最慢;
根据第二扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔次短及对应扫描振镜慢轴的运转速度次慢;
根据第三扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔最长及对应扫描振镜慢轴的运转速度最快。
实际应用中,待投影图像的划分获得的扫描区间的个数实际是由该待投影图像的像素分布密度决定的。即每个像素区间内的像素具有像素分布规律是相同的。例如第一扫描区间内相邻像素间的横向间隔和纵向间隔是固定的,按照1980*1080分辨率的像素密度分布;第二扫描区间内相邻像素间横向间隔和纵向间隔则是按照1280*720分辨率的像素密度分布;第三扫描区间内相邻像素间横向间隔和纵向间隔则是按照640*480分辨率的像素密度分布的。因此,第一像素区间内的相邻像素的横向间隔及纵向间隔均小于第二像素区间内的相邻像素的横向间隔及纵向间隔,第二像素区间内的相邻像素的横向间隔及纵向间隔均小于第三像素区间内的相邻像素的横向间隔及纵向间隔。当激光器分别点亮第一扫描区间的像素、第二扫描区间的像素及第三扫描区间的像素时,激光器点亮的时间间隔逐渐变长,扫描振镜慢轴分别运转至第一扫描区间、第二扫描区间及第三扫描区间时,扫描振镜的运转速度逐渐加快。
实际应用中,扫描振镜慢轴扫描待投影图像边缘像素时,边缘像素可能均位于第三扫描区间内,因此扫描振镜慢轴扫描第一列时,仍可以是匀速运动;当运转至待扫描图像中间时,中间列的像素可能分别位于第三扫描区间、第二扫描区间及第一扫描区间,此时扫描振镜慢轴扫描中间列时的运转速度由上边缘至中心的运转速度逐渐减慢,有中心至下边缘的运转速度逐渐加快,此时扫描振镜慢轴运转是一种非线性运动。
实际应用中,通过低分辨的投影设备投影获得更高分辨率投影图像的效果,使用户获得更好地观看体验;同样地,还可以将与投影设备分辨率适配的待投影图像,利用图1实施例的图像处理方法将该待投影图像转换为更低分辨率的待投影图像,通过投影设备投影获得投影图像清晰度不变的视觉效果。例如,该投影设备的分辨率为1280*720,获得待投影图像分辨率为1280*720,采用图1实施例的图像处理方法将该待投影图像转换为分辨率为640*480的待投影图像,采用本申请实施例投影方法仍可以获得1280*720分辨率的投影效果。这样可以在不降低用户观看体现的同时,节省投影设备用电量,使投影设备更加节能。
本申请实施例中,通过根据待投影图像像素按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低的分布规律,调整激光器的点亮时序及扫描振镜的运转速度,从而投影获得符合人眼视觉特性的待投影图像,在人眼中投影获得更高分辨率的投影图像的效果,使得用户观看到更加清晰的图像。
图3为本申请实施例提供的一种图像处理装置的一个实施例的结构示意图。该图像处理装置可以包括:
第一获取模块301,用于获取第一分辨率的待处理图像。
转换模块302,用于将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像。
其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率。
待投影图像确定模块303,用于将所述第二分辨率的待处理图像作为待投影图像。
其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。
作为一种可选地实施方式,所述转换模块302具体可以用于:
像素区间划分单元,用于将所述第一分辨率的待处理图像按照人眼视度划分为多个像素区间;
像素密度调整单元,用于将所述第一分辨率的待处理图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的分布规律依次调整每个像素区间的像素密度,使调整后的待处理图像的分辨率为与所述投影设备分辨率适配的第二分辨率。
作为一种可选地实施方式,所述像素区间划分单元具体可以用于:
确定所述第一分辨率的待处理图像对应人眼两度视场对应的第一像素区域;
确定所述第一分辨率的待处理图像对应人眼两度视场到十度视场对应的第二像素区域;
确定所述第一分辨率的待处理图像对应人眼大于十度的视场对应的第三像素区域。
作为一种可选地实施方式,所述像素密度调整单元具体可以用于:
使所述第一分辨率的待处理图像的第一像素区域的像素密度保持不变,保持为第一像素密度;
调整所述第一分辨率的待处理图像的第二像素区域的像素密度由所述第一像素密度降低为第二像素密度;
调整所述第一分辨率的待处理图像的第三像素区域的像素密度由所述第一像素密度降低为第三像素密度;其中,所述第二像素密度大于所述第三像素密度,且使得调整后的待处理图像的分辨率为所述第二分辨率。
前述已经详细说明本申请实施例的可行方案在此不再赘述。
本申请实施例中,通过将第一分辨率的待处理图像转换与投影设备分辨率适配的第二分辨率的待处理图像,且使得第二分辨率的待处理图像的限像素按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低分布。获得符合人眼视觉特性的待投影图像,为投影设备实现投影获得更高分辨率的投影图像的效果奠定了基础。
图4为本申请实施例提供的一种投影装置的一个实施例的结构示意图。该投影装置可以包括:
第二获取模块401,用于获取待投影图像。
其中,所述待投影图像是通过将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像后获得的;所述待投影图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布。
投影模块402,用于根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中,以投影获得人眼中心视场像素密度高、人眼边缘视场像素密度低的待投影图像。
作为一种可选地实施方式,所述投影模块402可以包括:
扫描区间划分单元,用于根据所述待投影图像的像素分布规律,将所述待投影图像划分为多个扫描区间。
调整单元,用于根据每个扫描区间的像素分布密度,调整每个扫描区间对应激光器的点亮时序及对应扫描振镜的运转速度。
控制单元,用于控制所述激光器按照每个扫描区间对应的激光器的点亮时序点亮的同时,控制所述扫描振镜按照每个扫描区间对应扫描振镜的运转速度运转,将所述待投影图像投影至人眼中。
作为一种可选地实施方式,所述扫描区间划分单元具体可以用于:
确定所述待投影图像对应人眼两度视场对应的第一扫描区间;
确定所述待投影图像对应人眼两度视场到十度视场对应的第二扫描区间;
确定所述待投影图像对应人眼大于十度的视场对应的第三扫描区间。
作为一种可选地实施方式,所述调整单元具体可以用于:
根据第一扫描区间的像素分布密度,调整所述第一扫描区间对应激光器点亮的时间间隔最短及调整对应扫描振镜慢轴的运转速度最慢;
根据第二扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔次短及调整对应扫描振镜慢轴的运转速度次慢;
根据第三扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔最长及调整对应扫描振镜慢轴的运转速度最快。
前述已经详细说明本申请实施例的可行方案在此不再赘述。
本申请实施例中,通过根据待投影图像像素按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低的分布规律,调整激光器的点亮时序及扫描振镜的运转速度,从而投影获得符合人眼视觉特性的待投影图像,在人眼中投影获得更高分辨率的投影图像的效果,使得用户观看到更加清晰的图像。
图5为本申请实施例提供的一种图像处理设备的一个实施例的结构示意图。该图像处理设备可以包括处理组件501和存储组件502;所述存储组件502存储一条或多条计算机程序指令;所述处理组件501用于调用并执行所述一条或多条计算机程序指令以实现:
获取第一分辨率的待处理图像;
将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像;其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率;
将所述第二分辨率的待处理图像作为待投影图像;其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。
可选地,该处理组件501还用于执行前述各方法步骤中的全部或部分步骤。
可选地,该图像设备可以是与投影设备连接的服务器或计算机设备,也可以是投影设备中的任一处理模组,在此不做具体限定。
其中,该处理组件501可以包括一个或多个处理器来执行计算机指令。当然处理组件501也可以为一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
该存储组件502可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
当然,电子设备还可以包括其他部件,例如输入/输出接口、通信组件等。输入/输出接口为处理组件和***接口模块之间提供接口,上述***接口模块可以是输出设备、输入设备等。通信组件被配置为便于可移动设备和其他设备之间有线或无线方式的通信,例如和控制设备的通信等等。
本申请实施例中,通过将第一分辨率的待处理图像转换与投影设备分辨率适配的第二分辨率的待处理图像,且使得第二分辨率的待处理图像的限像素按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低分布。获得符合人眼视觉特性的待投影图像,为投影设备实现投影获得更高分辨率的投影图像的效果奠定了基础。
图6为本申请实施例提供的一种投影设备的一个实施例的结构示意图。该投影设备可以包括处理组件601和存储组件602;所述存储组件602存储一条或多条计算机程序指令;所述处理组件601用于调用并执行所述一条或多条计算机程序指令以实现:
获取待投影图像;其中,所述待投影图像是通过将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像后获得的;所述待投影图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布;
根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中,以投影获得人眼中心视场像素密度高、人眼边缘视场像素密度低的待投影图像。
可选地,该处理组件601还用于执行前述各方法步骤中的全部或部分步骤。
可选地,该投影设备可以适用于任一通过激光器进行图像扫描的投影设备,或其它需要任意激光器进图像扫描的激光投影设备。
其中,该处理组件601可以包括一个或多个处理器来执行计算机指令。当然处理组件601也可以为一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
该存储组件602可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
当然,电子设备还可以包括其他部件,例如输入/输出接口、通信组件等。输入/输出接口为处理组件和***接口模块之间提供接口,上述***接口模块可以是输出设备、输入设备等。通信组件被配置为便于可移动设备和其他设备之间有线或无线方式的通信,例如和控制设备的通信等等。
本申请实施例中,通过根据待投影图像像素按照对应人眼中心视场区域的像素分布密度高,对应人眼边缘视场区域的像素分布密度低的分布规律,调整激光器的点亮时序及扫描振镜的运转速度,从而投影获得符合人眼视觉特性的待投影图像,在人眼中投影获得更高分辨率的投影图像的效果,使得用户观看到更加清晰的图像。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的***,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种图像处理方法,其特征在于,包括:
获取第一分辨率的待处理图像;
将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像;其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率;
将所述第二分辨率的待处理图像作为待投影图像;其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像包括:
将所述第一分辨率的待处理图像按照人眼视度划分为多个像素区间;
将所述第一分辨率的待处理图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的分布规律依次调整每个像素区间的像素密度,使调整后的待处理图像的分辨率为与所述投影设备分辨率适配的第二分辨率。
3.根据权利要求2所述的方法,其特征在于,所述将所述第一分辨率的待处理图像按照人眼视度划分为多个像素区间包括:
确定所述第一分辨率的待处理图像对应人眼两度视场对应的第一像素区域;
确定所述第一分辨率的待处理图像对应人眼两度视场到十度视场对应的第二像素区域;
确定所述第一分辨率的待处理图像对应人眼大于十度的视场对应的第三像素区域。
4.根据权利要求3所述的方法,其特征在于,所述将所述第一分辨率的待处理图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的分布规律依次调整每个像素区间的像素密度,使调整后的待处理图像的分辨率为与所述投影设备分辨率适配的第二分辨率包括:
使所述第一分辨率的待处理图像的第一像素区域的像素密度保持不变,保持为第一像素密度;
调整所述第一分辨率的待处理图像的第二像素区域的像素密度由所述第一像素密度降低为第二像素密度;
调整所述第一分辨率的待处理图像的第三像素区域的像素密度由所述第一像素密度降低为第三像素密度;其中,所述第二像素密度大于所述第三像素密度,且使得调整后的待处理图像的分辨率为所述第二分辨率。
5.一种投影方法,其特征在于,包括:
获取待投影图像;其中,所述待投影图像是通过将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像后获得的;所述待投影图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布;
根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中,以投影获得人眼中心视场像素密度高、人眼边缘视场像素密度低的待投影图像。
6.根据权利要求5所述的方法,其特征在于,所述根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中包括:
根据所述待投影图像的像素分布规律,将所述待投影图像划分为多个扫描区间;
根据每个扫描区间的像素分布密度,调整每个扫描区间对应激光器的点亮时序及对应扫描振镜的运转速度;
控制所述激光器按照每个扫描区间对应的激光器的点亮时序点亮的同时,控制所述扫描振镜按照每个扫描区间对应扫描振镜的运转速度运转,将所述待投影图像投影至人眼中。
7.根据权利要求6所述的方法,其特征在于,所述根据所述待投影图像的像素分布规律,将所述待投影图像划分为多个扫描区间包括:
确定所述待投影图像对应人眼两度视场对应的第一扫描区间;
确定所述待投影图像对应人眼两度视场到十度视场对应的第二扫描区间;
确定所述待投影图像对应人眼大于十度的视场对应的第三扫描区间。
8.根据权利要求7所述的方法,其特征在于,所述根据每个扫描区间的像素分布密度,调整每个扫描区间对应激光器的点亮时序及对应扫描振镜的运转速度包括:
根据第一扫描区间的像素分布密度,调整所述第一扫描区间对应激光器点亮的时间间隔最短及调整对应扫描振镜慢轴的运转速度最慢;
根据第二扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔次短及调整对应扫描振镜慢轴的运转速度次慢;
根据第三扫描区间的像素分布密度,调整所述第三扫描区间对应激光器点亮的时间间隔最长及调整对应扫描振镜慢轴的运转速度最快。
9.一种图像处理设备,其特征在于,包括处理组件和存储组件;所述存储组件存储一条或多条计算机程序指令;所述处理组件用于调用并执行所述一条或多条计算机程序指令以实现:
获取第一分辨率的待处理图像;
将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像;其中,所述第二分辨率的待处理图像的像素按照与人眼中心视场对应区域的像素密度高、以及与人眼边缘视场对应区域的像素密度低的规律分布;所述第一分辨率大于所述第二分辨率;
将所述第二分辨率的待处理图像作为待投影图像;其中,所述投影设备用以将所述待投影图像按照所述待投影图像的像素分布规律投影至人眼中。
10.一种投影设备,其特征在于,包括处理组件和存储组件;所述存储组件存储一条或多条计算机程序指令;所述处理组件用于调用并执行所述一条或多条计算机程序指令以实现:
获取待投影图像;其中,所述待投影图像是通过将所述第一分辨率的待处理图像转换为与投影设备分辨率适配的第二分辨率的待处理图像后获得的;所述待投影图像按照与人眼中心视场对应区域的像素密度高、与人眼边缘视场对应区域的像素密度低的规律分布;
根据所述待投影图像的像素分布规律,将所述待投影图像投影至人眼中,以投影获得人眼中心视场像素密度高、人眼边缘视场像素密度低的待投影图像。
CN201810996978.6A 2018-08-29 2018-08-29 图像处理方法、投影方法及设备 Pending CN108810504A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810996978.6A CN108810504A (zh) 2018-08-29 2018-08-29 图像处理方法、投影方法及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810996978.6A CN108810504A (zh) 2018-08-29 2018-08-29 图像处理方法、投影方法及设备

Publications (1)

Publication Number Publication Date
CN108810504A true CN108810504A (zh) 2018-11-13

Family

ID=64081451

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810996978.6A Pending CN108810504A (zh) 2018-08-29 2018-08-29 图像处理方法、投影方法及设备

Country Status (1)

Country Link
CN (1) CN108810504A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109752852A (zh) * 2018-12-12 2019-05-14 重庆爱奇艺智能科技有限公司 一种用于头戴式设备的显示***及其设计方法
CN113168080A (zh) * 2018-12-18 2021-07-23 索尼半导体解决方案公司 图像显示装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104777615A (zh) * 2015-04-17 2015-07-15 浙江大学 基于人眼跟踪的自适应高分辨近眼光场显示装置和方法
CN106507075A (zh) * 2016-11-18 2017-03-15 海信集团有限公司 一种投影图像处理方法、装置及投影显示***
CN106814450A (zh) * 2017-03-16 2017-06-09 北京理工大学 一种基于液体透镜的自适应调焦方法及***
US20170255013A1 (en) * 2016-03-04 2017-09-07 Sharp Kabushiki Kaisha Head mounted display using spatial light modulator to generate a holographic image

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104777615A (zh) * 2015-04-17 2015-07-15 浙江大学 基于人眼跟踪的自适应高分辨近眼光场显示装置和方法
US20170255013A1 (en) * 2016-03-04 2017-09-07 Sharp Kabushiki Kaisha Head mounted display using spatial light modulator to generate a holographic image
CN106507075A (zh) * 2016-11-18 2017-03-15 海信集团有限公司 一种投影图像处理方法、装置及投影显示***
CN106814450A (zh) * 2017-03-16 2017-06-09 北京理工大学 一种基于液体透镜的自适应调焦方法及***

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109752852A (zh) * 2018-12-12 2019-05-14 重庆爱奇艺智能科技有限公司 一种用于头戴式设备的显示***及其设计方法
CN113168080A (zh) * 2018-12-18 2021-07-23 索尼半导体解决方案公司 图像显示装置
CN113168080B (zh) * 2018-12-18 2023-09-22 索尼半导体解决方案公司 图像显示装置

Similar Documents

Publication Publication Date Title
CN108600781B (zh) 一种视频封面生成的方法以及服务器
CN106531092B (zh) 调整图像亮度和对比度的方法、视频处理器及显示装置
WO2015023074A1 (en) A method and apparatus for dynamic range enhancement of an image
CN106971165B (zh) 一种滤镜的实现方法及装置
CN105009195B (zh) 液晶显示装置
CA3001430C (en) Image processing method and device for led display screen
CN106462986A (zh) 用于数字图像的颜色处理的方法和***
WO2007047937A2 (en) Projection partitioning and aligning
RU2596062C1 (ru) Способ коррекции изображения глаз с использованием машинного обучения и способ машинного обучения
CN108810504A (zh) 图像处理方法、投影方法及设备
CN109817170A (zh) 像素补偿方法、装置和终端设备
CN105959584B (zh) 一种图像处理方法、图像处理装置及显示装置
EP3328067A1 (en) Method and apparatus for shooting image and terminal device
CN110110778B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN111595554A (zh) 测量方法、***、装置及终端设备
CN102696069B (zh) 电子设备
JP6771977B2 (ja) 画像処理装置および画像処理方法、プログラム
CN109587458A (zh) 投影***及其自动设定方法
CN107113412B (zh) 显示装置、显示校正装置、显示校正***和显示校正方法
CN105334690A (zh) 环绕光场显示器及其操作方法
CN109274949A (zh) 一种视频图像处理方法及其装置、显示设备
CN106782344A (zh) 亮度调节方法、装置及显示设备
CN105224538A (zh) 图像的抖动处理方法与装置
KR101633436B1 (ko) 다시점 카메라가 획득한 영상에 대한 색상 보정 방법 및 다시점 카메라가 획득한 영상에 대한 색상을 보정하는 장치
CN111784814A (zh) 一种虚拟角色皮肤调整方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20201029

Address after: 261061 north of Yuqing East Street, east of Dongming Road, Weifang High tech Zone, Weifang City, Shandong Province (Room 502, Geer electronic office building)

Applicant after: GoerTek Optical Technology Co.,Ltd.

Address before: 261031 No. 268 Dongfang Road, Weifang hi tech Industrial Development Zone, Shandong, Weifang

Applicant before: GOERTEK Inc.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181113