CN108234986B - 用于治疗近视或弱视的3d图像管理方法及管理***和装置 - Google Patents

用于治疗近视或弱视的3d图像管理方法及管理***和装置 Download PDF

Info

Publication number
CN108234986B
CN108234986B CN201810054258.8A CN201810054258A CN108234986B CN 108234986 B CN108234986 B CN 108234986B CN 201810054258 A CN201810054258 A CN 201810054258A CN 108234986 B CN108234986 B CN 108234986B
Authority
CN
China
Prior art keywords
image
rendering
parameter
amblyopia
eyes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810054258.8A
Other languages
English (en)
Other versions
CN108234986A (zh
Inventor
姚惜珺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201810054258.8A priority Critical patent/CN108234986B/zh
Publication of CN108234986A publication Critical patent/CN108234986A/zh
Application granted granted Critical
Publication of CN108234986B publication Critical patent/CN108234986B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/04Indexing scheme for image data processing or generation, in general involving 3D image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种用于治疗近视或弱视的3D图像的管理方法,首先将2D图像转化为可动态变化的3D图像;然后3D图像包括左视差图像和右视差图像,分别对应人体的左眼和右眼,其中左眼只能看到左视差图像,右眼只能看到右视差图像;所述3D图像在终端播放时,左视差图像和右视差图像的参数根据使用者的需要可以单独进行调节,其中一个图像的参数调节不影响另一个图像的参数。本发明的终端处理方法使得治疗近视或弱视的***无需再重新制作专门的视频;设计成左右屏幕的全部或者部分画面的参数单独调节,并不影响另一个画面的参数,可以给医生更充分的选择空间,更加有效治疗弱视眼,同时保护另一只健康的眼睛得到充分锻炼和保护。

Description

用于治疗近视或弱视的3D图像管理方法及管理***和装置
技术领域
本发明属于数字处理和医疗领域,涉及一种用于治疗近视或弱视的3D图像管理方法及管理***和装置。
背景技术
VR(Virtual Reality,虚拟现实)技术可通过设备在用户眼前呈现出虚拟的场景,包括视觉、听觉、交互等等方面。其中视觉是目前形成虚拟感官的最重要因素,现有VR设备利用人体双目立体视觉,使用户的两只眼睛看到的不同图像,从而通过视差就产生立体感3D场景。这一特性可用于包括医疗用途在内的各种领域。
目前,VR设备的内容形成机制复杂,导致VR设备可展示的内容呈现数量不足、不可定制化等问题。
现有形成VR设备视觉内容的方法如下:
通过人工建模或编辑3D场景,再进行3D影像录制,来为VR设备提供特定的虚拟现实内容。即先通过人工3D建模,再利用计算机图形学计算形成固定的视差的双屏内容直接提供给VR设备。此方法,构建场景的人工成本很高,导致内容数量的规模无法进行有效地扩展。另一方面,由于形成的虚拟场景是事先录制的,该虚拟场景无法进行定制化的更改和更新。
通过引入2D多媒体资源(图像和视频),将2D资源与人工构建的3D场景进行结合,再利用计算以达到2D媒体可在固定的3D虚拟场景下展示的目的。即将2D资源固定于特定3D虚拟场景下,到达2D资源存在于3D虚拟场景中的伪3D视觉效果,通过计算机视差计算形成双屏内容可使用户调整不同的视角观看2D资源内容。该方法可以有效通过现有的大量2D多媒体资源来形成虚拟场景内容,但是2D资源在3D场景下的位置是固定不可动态调节,不能使2D资源内容在3D场景中动态变更。由此,内容展现也是无法进行定制化变更的,从而很大程度失去了VR内容的可配置、可互动的特性。
而现在现有技术中虽然有2D资源转换成3D资源,但是缺少治疗所需要的3D图像的变换功能,比如图像的平移、翻转、缩放等,因此在近视或弱视的治疗中无法很好的利用现有的其他领域的2D资源。
弱视是眼科临床常见的儿童眼病,是婴幼儿时期,由于各种原因如知觉、运动、传导及视中枢等原因未能接受适宜的视刺激,使视觉发育受到影响而发生的视觉功能减退的状态,主要表现为视力低下及双眼单视功能障碍。
治疗弱视常见的治疗方法为遮盖法,分为完全以及部分遮盖。目的在于遮盖健眼,强迫弱视眼注视并且进行精细工作。然而遮盖法往往会导致弱视对侧的健康眼由于长时间的遮盖发生弱视并影响双眼的立体视和融合功能。
现有图像处理方法是针对单一图像进行的处理,不具有针对双眼特征将同一图像处理为不同程度展示内容的功能,因此,不能应用于双眼生理参数不同的VR应用场景下。
另一方面,传统图像处理方法不具有参数化的连续调节图像处理效果的特点,因此不能适应不同用眼条件下的微调能力,从而不能有效应用于用眼医疗领域。
发明内容
本发明的目的是提供将2D资源转化为3D场景中的3D实体,并通过计算机图形学的3D转换,使之可在3D场景中位置可动态变更(包括位移,旋转、缩放),并且采用双眼分视的立体成像方式制作而成,同时双眼所视的图像参数单独调节,以达到针对患者的个体情况有效治疗弱视,保护双眼的目的。
为实现上述目的,本发明采取下述技术方案来实现:
用于治疗近视或弱视的3D图像的管理方法,包括:首先将2D图像转化为可动态变化的3D图像;然后3D图像包括左视差图像和右视差图像,分别对应人体的左眼和右眼,其中左眼只能看到左视差图像,右眼只能看到右视差图像;
所述3D图像在终端播放时,左视差图像和右视差图像的参数根据使用者的需要可以单独进行调节,其中一个图像的参数调节不影响另一个图像的参数;
其中2D图像转化为可动态变化的3D图像的方法为:对2D图像进行图像抽取,将抽取结果通过纹理贴图运算置于3D坐标系中,然后在3D坐标系中进行运动处理与渲染实现动态变化,先进行3D坐标转换计算再通过投影计算形成进行2D图像投影;通过实时计算视差,将2D图像的多媒体内容通过可运动平面的方式融入3D场景,使其可在3D虚拟场景中按照预定方式进行3D图像的动态变化。
进一步,3D图像的动态变化为图像的平移、旋转、翻转或缩放中的一种或多种。
进一步,所述2D图像转化为可动态变化的3D图像的方法包括以下步骤:
步骤a,对2D图像进行图像抽取;
步骤b,选取所需的3D虚拟场景;
步骤c,在3D虚拟场景中构建2D资源平面,并为其2D资源平面构建所在坐标系的初始位置、夹角以及大小;
步骤d,构建2D资源平面的内部坐标系,通过解析2D资源图像的特征,进行坐标映射计算,将2D资源图像转化为2D资源平面的贴图;
步骤e,通过实时计算视差,将2D多媒体内容通过可运动平面的方式融入3D场景,使之可进行可配置的3D图形转换。
进一步,步骤e中,2D资源实体通过可配置的变化方式在3D场景中进行转换,其计算过程如下:
获取平面初始坐标矩阵,以及当前的坐标转换转化坐标矩阵;
获取已配置的平面运动轨迹,并计算当前阶段的转换矩阵,并使之平滑化;
在3D场景下进行资源平面的坐标计算,以获得下一帧下资源平面的坐标,并重新计算光线的反射效果;
通过VR设备的运动传感器数据以及设备的配置数据计算当前双眼在虚拟场景中的位置和视角;
通过下一帧的资源平面位置与双眼的虚拟位置计算下一帧下包括2D内容在内的3D场景下所有物体的投影关系,形成具有视差效果的双屏。
进一步,所述左视差图像和右视差图像的参数为左视差图像和右视差图像全部或部分画面的大小、亮度,灰度,饱和度,对比度中的一种或多种。
进一步,所述左视差图像和右视差图像部分画面的参数固定不变,调节时仅改变设定部分的参数。
进一步,单独调节参数的方法为根据左右眼参数设定进行可配置的内容遮蔽处理,包括以下步骤:
获取VR设备双眼的屏幕,并将其转化为图像
将内容进行左右分屏,并根据左右眼参数进行可配置的内容遮蔽处理。
针对左右眼参数配置,对左右眼图像可进行色彩、明暗、对比度的独立处理。
针对左右眼参数配置,对左右眼图像可进行图像大小的独立处理。
输出左右眼图像。
进一步,根据左右眼参数进行可配置的内容遮蔽处理的步骤为:
步骤1,复制图片内容为左右眼两份;
步骤2,将左右眼参数映射成左右两份内容的遮蔽百分比P1,P2,其中双眼遮蔽的内容之和P1+P2<100%;
步骤3,获取图片像素总和X,根据配置计算马赛克的单位大小,m*n像素方块为一个基础单位;
步骤4,随机挑选Y个基础单位作为马赛克方块,使马赛克总像素Y*m*n=X*(P1+P2);
步骤5,根据P1:P2值按比例将选中遮蔽方块随机分配给左右双眼的图像。
本发明还提供一种用于治疗近视或弱视的3D图像管理***,包括图像抽取模块,计算模块,3D处理模块,参数调节模块和VR设备;其中图像抽取模块对2D图像进行图像抽取,计算模块先进行3D坐标转换计算,通过实时计算视差,利用3D处理模块将2D图像的多媒体内容通过可运动平面的方式融入3D场景,使其可VR设备的3D虚拟场景中按照预定方式进行3D图像的动态变化;参数调节模块通过根据左右眼参数设定进行可配置的内容遮蔽处理,实现左视差图像和右视差图像的参数的单独调节。
本发明还提供一种治疗弱视的装置,所述装置包括穿戴式设备,所述设备中设有上述的用于治疗近视或弱视的3D图像管理***。
与现有技术相比,本发明具有以下优点:
本发明将2D多媒体内容通过可运动平面的方式融入3D场景,来实现快速VR内容产生;
通过使用实时计算视差的方法,将2D多媒体内容通过可运动平面的方式融入3D场景,使之可进行可配置的3D图形学转换,即多媒体内容可在虚拟场景中按照预定方式进行平移、旋转、翻转、缩放等改变;
通过先进行3D坐标转换计算再进行2D投影的计算方法,在设备计算能力的支持下可进行虚拟场景的动态光计算,可使2D多媒体内容运动在虚拟场景下更为真实。
本发明的3D图像本发明的参数调节方法根据弱视患者的自身特点,设计成左右屏幕的全部或者部分画面的大小、亮度、灰度、色饱和度和对比度等单独调节,并不影响另一个画面的参数,可以给医生更充分的选择空间,针对患者个体的情况,更加有效治疗弱视眼,同时保护另一只健康的眼睛得到充分锻炼和保护。
具体的,本发明针对双眼视力可独立进行内容的处理,采用多种弱化方式结合来形成可定制化的医疗过程;各种弱化过程实现都可通过双眼参数进行连续线性调整,可按医疗进度进行微调适应。
通过观看本发明的3D图像,可以锻炼弱视儿童定像、定位、识别、追随、搜寻等有关方面技能。在体感互动技术的支持下,通过训练使弱视儿童学会视觉操作(动作、眼、脑协调),掌握视觉技能,建立视觉印象,形成视觉记忆,提升大脑皮层视神经元对影响的处理过程,从而促使他们的视觉运用能力的提高。
具体实施方式
下面结合具体实施例对本发明进行详细阐述。
本发明一个实施例中,将普通的2D资源转换为3D资源,具体步骤如下:
在VR软件***中对2D资源(特别是视频)进行图像抽取;
VR软件***导入选取3D虚拟场景;在3D虚拟场景中构建2D资源平面(一个大小适中的平面),并为其构建所在坐标系的初始位置、夹角以及大小;
构建2D资源平面的内部坐标系,通过解析2D资源图像的特征,进行坐标映射计算,将2D资源图像转化为2D资源平面的贴图;
2D资源实体可通过可配置的变化方式在3D场景中进行转换,其计算过程如下:
获取平面初始坐标矩阵,以及当前转化坐标矩阵;
平面初始坐标即为开始时间为0时候的坐标;
计算每个阶段的转换矩阵;
转换矩阵是从时间点0(定义的开始时间)到当前时间点这段时间内的位移、旋转等操作的总和,初始坐标*转换矩阵=目前的坐标。
就本发明一个实施例中如果视频有100帧,那如果每一帧进行一次位置更新的话,就会有99次位置更新,也就有99个转换矩阵。
获取已配置的平面运动轨迹,并计算当前阶段的转换矩阵,并使之平滑化;
比如,从左上匀速移动到右下”这样的意图变成99个转换矩阵(每一个都表示右移一点点,下移一点点)。
获取已配置的平面运动轨迹就是通过软件配置,可以预定义运动效果,比如平滑的从左到右,同时随机的上下,同时加速的自转等等,此处的运动轨迹指用户希望得到的效果。
在3D场景下进行资源平面的坐标计算,以获得下一帧下资源平面的坐标(涉及平移、旋转及缩放),并重新计算光线的反射效果;
此步就是将“当前坐标”*“下一阶段转换矩阵”,结果是下一帧它应该在的坐标,然后再根据新坐标进行光的计算。通过当前平面与光源的相对位置及夹角处理如点光源或者平行光源下的反光效果。
通过VR设备的运动传感器数据以及不同设备的配置数据(瞳距等)计算当前双眼在虚拟场景中的位置和视角;
VR设备的运动传感器获取的运动数据,主要表示用户转头的角度,抬头的角度等等。以用户视角为输入,考虑瞳距,计算得出左右眼在3D场景中的坐标及朝向,通过将3D场景进行左右眼的投影计算形成最终图像。
通过下一帧的资源平面位置与双眼的虚拟位置计算下一帧下包括2D内容在内的3D场景下所有物体的投影关系,形成具有视差效果的双屏。
本发明具体提供一种治疗弱视的装置,所述装置包括穿戴式设备,所述设备中3D图像***包括显示屏,凸透镜镜片和输出在显示屏上的左视差图像和右视差图像;其中左视差图像和右视差图像在显示屏上平分,左视差图像和右视差图像成轴对称分布;所述左视差图像和右视差图像的参数根据使用者的需要分别单独进行调节。
其中所述头戴式设备穿戴于用户头部,在对应人体双眼位置分别设有透镜或透镜组。
显示器用于播放3D图像,可以为设置在头戴式设备相应位置处的一般显示器,也可以为普通智能手机屏幕,也可以为视网膜投影式显示器。
以目前常见的普通智能手机为例,在头戴式设备对应位置处设置一个容纳腔,将手机放入,手机显示屏对准头戴式设备的透镜或透镜组位置。预设的3D图像可存储于手机中,点击播放即可。
所述左视差图像和右视差图像是根据人体双眼视差原理分别制作的,两者具有微小差别的图像,左视差图像和右视差图像成轴对称分布,人体双眼分别看到其中一幅图画,然后融合得到一幅具有立体效果的图像。通过将同一画面分为左视差图像和右视差图像,使得可以以近目标模拟远目标,使我们的眼睛在近环境包围中就能得到看远和看近的协调锻炼。
本发明中的3D图像从画面中间平分为左视差图像和右视差图像。以智能手机为例,将智能手机屏幕横向放置,然后从中间平分为左屏和右屏,分别播放左视差图像和右视差图像。
凸透镜眼镜的左、右目镜均为凸透镜,左、右目镜中心分别对应左右两个屏幕。
左、右屏可通过触摸屏、按键或旋钮等各种控制方式调整相关软件参数,所述软件根据***配套的传感器获取信息并对左右屏幕的全部或者部分画面的大小、亮度、灰度、色饱和度和对比度等作出相应的调整,在调整后的左、右屏之间的图像通过3D图像***可对弱视患者进行治疗训练。
本发明的左视差图像和右视差图像可以单独对参数进行调整。本发明一个实施例中,通过终端设备,如手机上的软件,播放3D图像,该软件同时可以给客户充分的选择,即可单独选择左视差图像和右视差图像的各项参数。或者以蓝牙方式连接遥控装置等控制调节各项参数。
例如,当左视差图像的参数从最小值调节至最大值时,右视差图像的参数能保持原有图像的参数不发生变化。或者当左视差图像的面积参数从原始画面100%的最大值,按同比例调节至70%的最小大值时,右视差图像的面积参数能保持原有图像的原始大小不发生变化。
本发明一个实施例中,本发明的处理方法为根据左右眼参数设定进行可配置的内容遮蔽处理,包括以下步骤:
复制图片内容为左右眼两份;
将左右眼参数映射成左右两份内容的遮蔽百分比P1,P2(双眼遮蔽的内容之和P1+P2<100%);
获取图片像素总和X,根据配置计算马赛克的单位大小(m*n像素方块为一个基础单位);
随机挑选Y个基础单位作为马赛克方块,使马赛克总像素Y*m*n=X*(P1+P2);
根据P1:P2值按比例将选中遮蔽方块随机分配给左右双眼的图像;
针对方块内容,可使用步骤3中的方式进行弱化处理。
具体的,针对左右眼参数配置,对左右眼图像可进行独立处理。其中图像的各种参数调节步骤可以按任意顺序自由进行,各参数的调节彼此互不影响,且无需限定顺序。本发明下面列举了几个具体实施例,针对不同参数举例说明可以如何进行调节。
实施例1色彩的单独调节
具体步骤如下:
1.获取眼睛参数
2.获取图像的每个像素点数值(现存上有多种像素颜色的表述方法,下面的计算方法处用RGB表述来举例说明)
3.对每个像素的数值进行计算,具体如下:
根据左右眼配置参数,调整图像的色彩强度,使左右眼接收的图像色彩强度形成差异。其具体过程为通过对图像进行像素级别计算,以使图像根据不同参数呈现出不同的色彩效果,方法如下:
输入参数为该左右两眼的信息强度参数百分比P([0,1]范围)
其特征为当P为1时,图像具有原始的色彩呈现,当P为0时,图像呈现为灰度图像,P为中间值变化时,图像的效果变化呈线性变化关系
本方法采用像素级别的映射方式进行图像的色彩弱化处理,以图像的RGB颜色空间模型为例进行描述,(其他模型如HSV等,表述方法不同,但是其数学计算本质类似)。
对于图像的每个像素获取其RGB值,并将其替换为响应的映射值,符合以上特征的具体图像灰化的像素处理方法有多种计算方式,典型映射方法例子如下(但不仅含):
(R,G,B)->(R*P+(R+G+B)/3*(1-P),G*P+(R+G+B)/3*(1-P),B*P+(R+G+B)/3*(1-P))。
根据左右眼配置参数,调整图像的明暗强度,使左右眼接收的图像明暗强度形成差异。其具体过程为通过对图像进行像素级别计算,以使图像根据不同参数呈现出不同的亮度效果,方法如下:
输入参数为该左右两眼的信息强度参数百分比P([0,1]范围)
其特征为当P为1时,图像具有原始的色彩呈现,当P为0时,图像呈现为纯黑图像,P为中间值变化时,图像的效果变化呈线性变化关系
本方法采用像素级别的映射方式进行图像的色彩弱化处理,以图像的RGB颜色空间模型为例进行描述,(其他模型如HSV等,表述方法不同,但是其数学计算本质类似);
对于图像的每个像素获取其RGB值,并将其替换为响应的映射值,符合以上特征的具体图像暗化的像素处理方法有多种计算方式,典型映射方法例子如下(但不仅含):
(R,G,B)->(R*P,G*P,B*P)。
实施例2对比度的单独调节
具体步骤如下:
1.获取眼睛参数
2.获取图像的每个像素点数值
3.对每个像素的数值进行计算,具体如下:
根据左右眼配置参数,调整图像的对比度强度,使左右眼接收的图像明暗强度形成差异。其具体过程为通过对图像进行像素级别计算,以使图像根据不同参数呈现出不同的亮度效果,方法如下:
输入参数为该左右两眼的信息强度参数百分比P([0,1]范围)
其特征为利用P值来重新分布图像的色域,P值越大图像的颜色对比度越明显,P值越小图像的颜色范围以及像素间差异对应缩小。当P为1时,图像具有原始的色彩呈现,当P为0时,图像呈现为灰色图像,P为中间值变化时,图像的效果变化呈线性变化关系
本方法采用像素级别的映射方式进行图像的对比弱化处理,以图像的RGB颜色空间模型为例进行描述,(其他模型如HSV等,表述方法不同,但是其数学计算本质类似)
对于图像的每个像素获取其RGB值,并将其替换为响应的映射值,符合以上特征的具体图像对比弱化的像素处理方法有多种计算方式,典型映射方法例子如下(但不仅含):
(R,G,B)->((R+Max*(1-P))/2,(G+Max*(1-P))/2,(B+Max*(1-P))/2)
其中Max值为RGB的最大取值上限,归一化后可视为1。
实施例3图像大小的单独调节
具体步骤如下:
1.获取眼睛参数
2.获取图像的每个像素点数值
3.对每个像素的数值进行计算,具体如下:
根据左右眼配置参数,调整图像的大小,使左右眼接收的图像大小形成差异。
输入参数为该左右两眼的信息强度参数百分比P([0,1]范围)
其特征为P值越大图像面积越大,P值越小图像面积越小。当P为1时,图像具有原始的大小呈现,当P为0时,图像面积为0,P为中间值变化时,图像的效果变化呈线性变化关系。
本方法采用插值方法进行图像的缩放计算,其过程如下:
通过比例重新计算缩放后图片的大小(长与宽);
计算目标图片中每个像素在源图片中的对应坐标;
根据像素坐标进行,目标图片像素色彩的插值计算(如邻近插值,双线插值等等);
输出目标图像。
本发明虽然已以较佳实施例公开如上,但其并不是用来限定本发明,任何本领域技术人员在不脱离本发明的精神和范围内,都可以利用上述揭示的遮蔽装置和技术内容对本发明技术方案做出可能的变动和修改,因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰,均属于本发明技术方案的保护范围。

Claims (10)

1.用于治疗近视或弱视的3D图像的管理方法,其特征在于,首先将2D图像转化为可动态变化的3D图像;然后3D图像包括左视差图像和右视差图像,分别对应人体的左眼和右眼,其中左眼只能看到左视差图像,右眼只能看到右视差图像;
所述3D图像在终端播放时,左视差图像和右视差图像的参数根据使用者的需要可以单独进行调节,其中一个图像的参数调节不影响另一个图像的参数;
其中2D图像转化为可动态变化的3D图像的方法为:对2D图像进行图像抽取,将抽取结果通过纹理贴图运算置于3D坐标系中,然后在3D坐标系中进行运动处理与渲染实现动态变化,先进行3D坐标转换计算再通过投影计算形成进行2D图像投影;通过实时计算视差,将2D图像的多媒体内容通过可运动平面的方式融入3D场景,使其可在3D虚拟场景中按照预定方式进行3D图像的动态变化。
2.根据权利要求1所述的用于治疗近视或弱视的3D图像的管理方法,其特征在于,3D图像的动态变化为图像的平移、旋转、翻转或缩放中的一种或多种。
3.根据权利要求1所述的用于治疗近视或弱视的3D图像的管理方法,其特征在于,所述2D图像转化为可动态变化的3D图像的方法包括以下步骤:步骤a,对2D图像进行图像抽取;
步骤b,选取所需的3D虚拟场景;
步骤c,在3D虚拟场景中构建2D资源平面,并为其2D资源平面构建所在坐标系的初始位置、夹角以及大小;
步骤d,构建2D资源平面的内部坐标系,通过解析2D资源图像的特征,进行坐标映射计算,将2D资源图像转化为2D资源平面的贴图;
步骤e,通过实时计算视差,将2D多媒体内容通过可运动平面的方式融入3D场景,使之可进行可配置的3D图形转换。
4.根据权利要求3所述的用于治疗近视或弱视的3D图像的管理方法,其特征在于,步骤e中,2D资源实体通过可配置的变化方式在3D场景中进行转换,其计算过程如下:
获取平面初始坐标矩阵,以及当前的坐标转换转化坐标矩阵;
获取已配置的平面运动轨迹,并计算当前阶段的转换矩阵,并使之平滑化;在3D场景下进行资源平面的坐标计算,以获得下一帧下资源平面的坐标,并重新计算光线的反射效果;
通过VR设备的运动传感器数据以及设备的配置数据计算当前双眼在虚拟场景中的位置和视角;
通过下一帧的资源平面位置与双眼的虚拟位置计算下一帧下包括2D内容在内的3D场景下所有物体的投影关系,形成具有视差效果的双屏。
5.根据权利要求1所述的用于治疗近视或弱视的3D图像的管理方法,其特征在于,所述左视差图像和右视差图像的参数为左视差图像和右视差图像全部或部分画面的大小、亮度,灰度,饱和度,对比度中的一种或多种。
6.根据权利要求1所述的用于治疗近视或弱视的3D图像的管理方法,其特征在于,所述左视差图像和右视差图像部分画面的参数固定不变,调节时仅改变设定部分的参数。
7.根据权利要求1所述的用于治疗近视或弱视的3D图像的管理方法,其特征在于,单独调节参数的方法为根据左右眼参数设定进行可配置的内容遮蔽处理,包括以下步骤:
获取VR设备双眼的屏幕,并将其转化为图像;
将内容进行左右分屏,并根据左右眼参数进行可配置的内容遮蔽处理;
针对左右眼参数配置,对左右眼图像可进行色彩、明暗、对比度的独立处理针对左右眼参数配置,对左右眼图像可进行图像大小的独立处理;
输出左右眼图像。
8.根据权利要求7所述的用于治疗近视或弱视的3D图像的管理方法,其特征在于,根据左右眼参数进行可配置的内容遮蔽处理的步骤为:
步骤1,复制图片内容为左右眼两份;
步骤2,将左右眼参数映射成左右两份内容的遮蔽百分比P1,P2,其中双眼遮蔽的内容之和P1+P2<100%;
步骤3,获取图片像素总和X,根据配置计算马赛克的单位大小,m*n像素方块为一个基础单位;
步骤4,随机挑选Y个基础单位作为马赛克方块,使马赛克总像素Y*m*n=X*(P1+P2);
步骤5,根据P1:P2值按比例将选中遮蔽方块随机分配给左右双眼的图像。
9.一种用于治疗近视或弱视的3D图像管理***,其特征在于,所述3D图像管理***包括图像抽取模块,计算模块,3D处理模块,参数调节模块和VR设备;其中图像抽取模块对2D图像进行图像抽取,计算模块先进行3D坐标转换计算,通过实时计算视差,利用3D处理模块将2D图像的多媒体内容通过可运动平面的方式融入3D场景,使其能够在VR设备的3D虚拟场景中按照预定方式进行3D图像的动态变化;参数调节模块通过根据左右眼参数设定进行可配置的内容遮蔽处理,实现左视差图像和右视差图像的参数的单独调节。
10.一种治疗弱视的装置,所述装置包括穿戴式设备,所述设备中设有如权利要求9所述的用于治疗近视或弱视的3D图像管理***。
CN201810054258.8A 2018-01-19 2018-01-19 用于治疗近视或弱视的3d图像管理方法及管理***和装置 Active CN108234986B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810054258.8A CN108234986B (zh) 2018-01-19 2018-01-19 用于治疗近视或弱视的3d图像管理方法及管理***和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810054258.8A CN108234986B (zh) 2018-01-19 2018-01-19 用于治疗近视或弱视的3d图像管理方法及管理***和装置

Publications (2)

Publication Number Publication Date
CN108234986A CN108234986A (zh) 2018-06-29
CN108234986B true CN108234986B (zh) 2019-03-15

Family

ID=62668067

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810054258.8A Active CN108234986B (zh) 2018-01-19 2018-01-19 用于治疗近视或弱视的3d图像管理方法及管理***和装置

Country Status (1)

Country Link
CN (1) CN108234986B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111202663B (zh) * 2019-12-31 2022-12-27 浙江工业大学 一种基于vr技术的视觉训练学习***

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103384340A (zh) * 2013-06-28 2013-11-06 中南大学 一种从单幅2d图像获取3d成像图像的方法
WO2014070814A2 (en) * 2012-11-01 2014-05-08 X6D Limited Glasses for amblyopia treatment
CN104618710A (zh) * 2015-01-08 2015-05-13 左旺孟 基于增强光场显示的视觉缺陷校正***

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI468849B (zh) * 2011-04-28 2015-01-11 Inst Information Industry 建築物紋理擷取裝置及其方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014070814A2 (en) * 2012-11-01 2014-05-08 X6D Limited Glasses for amblyopia treatment
CN103384340A (zh) * 2013-06-28 2013-11-06 中南大学 一种从单幅2d图像获取3d成像图像的方法
CN104618710A (zh) * 2015-01-08 2015-05-13 左旺孟 基于增强光场显示的视觉缺陷校正***

Also Published As

Publication number Publication date
CN108234986A (zh) 2018-06-29

Similar Documents

Publication Publication Date Title
CN108271011B (zh) 用于治疗弱视的3d图像***的参数处理方法及***和装置
JP6870080B2 (ja) 画像生成装置、画像表示システム、および画像生成方法
US20200174262A1 (en) Head-mountable apparatus and methods
CN106484116B (zh) 媒体文件的处理方法和装置
CN104618710B (zh) 基于增强光场显示的视觉缺陷校正***
US20060232665A1 (en) Materials and methods for simulating focal shifts in viewers using large depth of focus displays
CN107277495A (zh) 一种基于视频透视的智能眼镜***及其透视方法
CN105629469B (zh) 基于液晶透镜阵列的头戴式显示设备
CN106491323B (zh) 用于治疗弱视的视频***和装置
US11962746B2 (en) Wide-angle stereoscopic vision with cameras having different parameters
CN104581119B (zh) 一种3d图像的显示方法和一种头戴设备
CN107272200A (zh) 一种焦距控制设备、方法及vr眼镜
US11570426B2 (en) Computer-readable non-transitory storage medium, web server, and calibration method for interpupillary distance
CN110021445A (zh) 一种基于vr模型的医疗***
CN107669455A (zh) 一种视觉训练方法、装置和设备
US20200051207A1 (en) Image generating apparatus, image displaying system, and image generating method
WO2007059477A2 (en) Virtual patient simulator
WO2018176927A1 (zh) 虚拟主动视差计算补偿的双目渲染方法及***
CN109521871B (zh) 一种融合功能的训练方法、装置、设备及存储介质
CN108064447A (zh) 图像显示方法、智能眼镜及存储介质
CN108234986B (zh) 用于治疗近视或弱视的3d图像管理方法及管理***和装置
CN102798981B (zh) 仿生3d立体成像***
US11107276B2 (en) Scaling voxels in a virtual space
Çöltekin Foveation for 3D visualization and stereo imaging
CN116172493A (zh) 用于内窥镜***的成像及显示方法和内窥镜***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant