CN111667906B - 一种眼球结构虚拟教学***及其数字模型建立方法 - Google Patents
一种眼球结构虚拟教学***及其数字模型建立方法 Download PDFInfo
- Publication number
- CN111667906B CN111667906B CN202010541563.7A CN202010541563A CN111667906B CN 111667906 B CN111667906 B CN 111667906B CN 202010541563 A CN202010541563 A CN 202010541563A CN 111667906 B CN111667906 B CN 111667906B
- Authority
- CN
- China
- Prior art keywords
- eyeball
- module
- model
- data
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 210000005252 bulbus oculi Anatomy 0.000 title claims abstract description 138
- 238000000034 method Methods 0.000 title claims abstract description 35
- 230000036541 health Effects 0.000 claims abstract description 30
- 238000000547 structure data Methods 0.000 claims abstract description 16
- 230000036285 pathological change Effects 0.000 claims abstract description 15
- 231100000915 pathological change Toxicity 0.000 claims abstract description 15
- 208000030533 eye disease Diseases 0.000 claims abstract description 11
- 210000001508 eye Anatomy 0.000 claims description 23
- 238000003384 imaging method Methods 0.000 claims description 23
- 230000000694 effects Effects 0.000 claims description 20
- 238000004519 manufacturing process Methods 0.000 claims description 18
- 238000009877 rendering Methods 0.000 claims description 18
- 230000002265 prevention Effects 0.000 claims description 15
- 230000004379 myopia Effects 0.000 claims description 14
- 208000001491 myopia Diseases 0.000 claims description 14
- 239000000463 material Substances 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 10
- 238000004088 simulation Methods 0.000 claims description 8
- 210000004087 cornea Anatomy 0.000 claims description 7
- 210000000695 crystalline len Anatomy 0.000 claims description 7
- 239000011521 glass Substances 0.000 claims description 6
- 210000001742 aqueous humor Anatomy 0.000 claims description 5
- 210000004127 vitreous body Anatomy 0.000 claims description 5
- 230000004927 fusion Effects 0.000 claims description 4
- 230000003902 lesion Effects 0.000 description 9
- 238000012937 correction Methods 0.000 description 5
- 201000010099 disease Diseases 0.000 description 5
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 5
- 210000001525 retina Anatomy 0.000 description 5
- 230000001886 ciliary effect Effects 0.000 description 4
- 210000003205 muscle Anatomy 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013480 data collection Methods 0.000 description 3
- 230000004436 pseudomyopia Effects 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 201000009487 Amblyopia Diseases 0.000 description 2
- 206010020675 Hypermetropia Diseases 0.000 description 2
- 241000219095 Vitis Species 0.000 description 2
- 235000009754 Vitis X bourquina Nutrition 0.000 description 2
- 235000012333 Vitis X labruscana Nutrition 0.000 description 2
- 235000014787 Vitis vinifera Nutrition 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000001125 extrusion Methods 0.000 description 2
- 201000006318 hyperopia Diseases 0.000 description 2
- 230000004305 hyperopia Effects 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000007170 pathology Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 210000003786 sclera Anatomy 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000006806 disease prevention Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000001575 pathological effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Geometry (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Computer Graphics (AREA)
- Radiology & Medical Imaging (AREA)
- Software Systems (AREA)
- Biomedical Technology (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Processing Or Creating Images (AREA)
- Instructional Devices (AREA)
Abstract
本发明公开了一种眼球结构虚拟教学***,包括:眼球结构数据采集模块,用于采集或导入眼球的结构数据;医学资料模块,用于储存或更新与眼球相关的健康与病变数据;数字模型模块,用于根据眼球结构数据和健康与病变数据生成三维眼球结构模型;控制模块,用于生成控制指令;全息设备模块,用于根据控制指令播放三维眼球结构模型。本发明可以根据不同的眼部疾病实时制作不同的眼科模型,便于不同眼球模型展示和眼科普及教学。本发明还公开了一种用于眼球结构虚拟教学***的模型建立方法。
Description
技术领域
本发明涉及虚拟教学***领域,特别涉及一种眼球结构虚拟教学***及其数字模型建立方法。
背景技术
眼科教具实物模型是通过实物的方式来表述眼球结构,使得教学活动更为直观,利于理解。但是,实物模型的制作较为繁琐,导致实物模型价格较高,难以普及。同时,由于实物模型对教学的帮助作用的大小,取决于实物模型制作的精细程度以及是否可以拆解后展示内部结构。即使实物模型制作精细,还会存在如何展示病变过程、如何与讲解内容进行配合以及实物模型内部各结构如何进行对应教学的困难,导致受教者难以理解,施教者重复工作多等劣势。这些劣势一直阻碍着眼科普及教学的发展。
发明内容
为解决上述技术问题,本发明的一方面的实施例提供一种眼球结构虚拟教学***,包括:
眼球结构数据采集模块,用于采集或导入眼球的结构数据;
医学资料模块,用于储存或更新与眼球相关的健康与病变数据;
数字模型模块,用于根据眼球结构数据和健康与病变数据生成三维眼球结构模型;
控制模块,用于生成控制指令;
全息设备模块,用于根据控制指令播放三维眼球结构模型。
采用上述技术方案,可以根据不同的眼部疾病实时制作不同的眼科模型,便于不同眼球模型展示和眼科普教学。
进一步地,病变数据包括眼球的近视过程。
进一步地,三维眼球结构模型为图片、音频和视频的组合。
进一步地,还包括:遥控模块,用于获取用户的操作信息,并将操作信息传送至控制模块。
进一步地,还包括:语音模块,包括语音特征模型库和语音数据采集模块,语音特征模型库用于储存与三维眼球结构模型和医学资料对应的语音特征模型,语音数据采集模块用于采集并识别语音数据,以及将采集到的语音数据和语音特征模型比对匹配,并将匹配结果传送至控制模块。
进一步地,还包括:服务模块,包括预防模块和体验模块,预防模块用于介绍各种眼部疾病的基本信息和预防知识,体验模块提供眼睛治疗仿真场景。
本发明的另一方面的实施例提供一种用于眼球结构虚拟教学***的数字模型建立方法,包括以下步骤:
采集或导入眼球结构数据;
储存或更新与眼球相关的健康与病变数据;
根据储存的眼球结构数据和健康与病变数据生成三维眼球结构模型;
根据全息影像设备的设备参数,匹配动画演绎视频至三维眼球结构模型;
制作虚拟贴图、虚拟灯光及特效,并将虚拟贴图、虚拟灯光及特效导入全息影像设备渲染三维眼球结构模型;
获取用户的操作信息并生成控制指令;
根据控制指令播放三维眼球结构模型。
进一步地,还包括:输入逻辑控制运算方法,设定全息影像设备和遥控模块以实现全息影像设备和遥控模块的匹配。
进一步地,还包括:调整三维眼球结构模型的材质。
附图说明
图1是本发明的一方面的一实施例提供的一种眼球结构虚拟教学***的结构示意图;
图2是本发明的一方面的另一实施例提供的一种眼球结构虚拟教学***的结构示意图;
图3是本发明的另一方面的一实施例提供的一种用于眼球结构虚拟教学***的数字模型建立方法的流程图;
图4是本发明的另一方面的另一实施例提供的一种用于眼球结构虚拟教学***的数字模型建立方法的流程图;
图5是本发明的另一方面的又一实施例提供的一种用于眼球结构虚拟教学***的数字模型建立方法的流程图。
附图标记:
眼球结构数据采集模块 100;
医学资料模块 200;
数字模型模块 300;
控制模块 400;
全息设备模块 500;
遥控模块 600;
语音模块 700;
语音特征模型库 701;
语音数据采集模块 702;
服务模块 800;
预防模块 801;
体验模块 802。
具体实施方式
以下由特定的具体实施例说明本发明的实施方式,本领域技术人员可由本说明书所揭示的内容轻易地了解本发明的其他优点及功效。虽然本发明的描述将结合较佳实施例一起介绍,但这并不代表此发明的特征仅限于该实施方式。恰恰相反,结合实施方式作发明介绍的目的是为了覆盖基于本发明的权利要求而有可能延伸出的其它选择或改造。为了提供对本发明的深度了解,以下描述中将包含许多具体的细节。本发明也可以不使用这些细节实施。此外,为了避免混乱或模糊本发明的重点,有些具体细节将在描述中被省略。需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
应注意的是,在本说明书中,相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明的实施方式作进一步地详细描述。
眼科教具模型是通过实物模型的方式来表述眼部疾病的成因过程,然而实物模型制作繁琐,也较难通过实物模型讲解疾病的成因过程,同时一个眼科教具模型通常只能演示一种固定的疾病成因过程无法面面俱到地展示疾病的形成细节。
本发明的***可用于加载眼球模型结构数据,可根据具体需求随时扩展,开发并建立高品质三维眼球结构模型。不同于普通的眼球模型,本发明建立的三维眼球结构模型更精细地呈现眼球结构材质。使用多种软硬件如:Maya、3dsMax、AfterEffect等相结合开发,并对三维眼球结构模型进行动画制作,数据采集与修补,形成完整的三维眼球结构模型。
如图1所示,本发明的一方面的一实施例公开了一种眼球结构虚拟教学***,包括:
眼球结构数据采集模块100,用于采集或导入眼球结构数据;
医学资料模块200,用于储存或更新与眼球相关的健康与病变数据;
数字模型模块300,用于根据眼球结构数据和健康与病变数据生成三维眼球结构模型;
控制模块400,用于生成控制指令;
全息设备模块500,用于根据控制指令播放三维眼球结构模型。
眼球结构采集模块100用于采集或导入眼球的结构数据,例如眼球的感光***由外层膜、中层膜和内层膜构成,外层膜包括角膜和巩膜,中层膜包括葡萄膜,内层膜包括视网膜;眼球的屈光***由角膜、房水、晶状体和玻璃体构成。眼球结构采集模块100可以通过外接设备(例如传感器)采集眼球的结构数据,也可以直接导入眼球的结构数据。
医学资料模块200储存和更新与眼球相关的健康与病变数据并建立各个健康数据与病变数据的对应关系。例如,病变数据可以是近视形成过程:晶状体靠悬韧带附着在一圈睫状肌上,远眺时,远处光线恰好聚焦在视网膜上,成像清晰;看近时,焦点落在视网膜后面,睫状肌收缩,悬韧带放松,从而成像在视网膜上。长时间过度看近时,睫状肌始终处于收缩状态,造成看东西模糊的情况,这就是假性近视。假性近视通过休息或使用药物后视力可改善或完全恢复,如果睫状肌长时间处于收缩状态,会从假性近视演变为真性近视。同时,医学资料模块200可以连接外部服务器实时更新与眼球相关的健康与病变数据,也可以设置导入接口用于导入与眼球相关的健康与病变数据。
数字模型模块300分别与眼球结构数据采集模块100和医学资料模块200连接,并根据眼球的结构数据和健康与病变数据生成三维眼球结构模型(包括图片、音频和/或视频),例如健康的三维眼球结构模型、近视的三维眼球结构模型、健康的三维眼球结构模型演变为近视的三维眼球结构模型的视频等。数字模型模块300采用融合变形编辑对柔性物体进行动画的制作,通过Maya和3dsMax完成不规则物品的挤压、拉伸、切开、扭曲及其它变形动画来模拟眼球内部渲染产生的变化,通过3dsMax逐层渲染三维眼球结构模型的材质使角膜、房水、晶状体和玻璃体的光影效果更好,通过AfterEffect对三维眼球结构模型进行分层渲染。数字模型模块300制作虚拟贴图,并根据脚本,制作眼球三维建模和动画。眼球三维建模采用标准数据进行模型三维重构与拓扑,最后完成三维眼球结构模型建模、优化、贴图和美化。数字模型模块300通过3dsMax将三维眼球结构模型生成数字化素材,并根据数字化素材生成与三维眼球结构模型相关动画演示相适应的灯光体系。同时数字模型模块300还可以给三维眼球结构模型的各个部位设置触发事件,当该部位发生触发事件,将产生的触发信号传送至控制模块400,控制模块400根据触发信号控制全息设备模块500播放与该部位相关的健康与病变数据,例如近视的形成过程的视频和音频。
全息设备模块500与控制模块400连接,全息设备模块500包括外壳体、显示装置和成像装置。显示装置设置在外壳体的顶面,且显示装置的显示屏朝向外壳体的底面;成像装置是由四块玻璃板围成的四棱锥,成像装置固定设置在外壳体内,其底面设置在外壳体的底部,其顶点与外壳体的显示装置的显示屏中心重合。显示装置将三维眼球结构模型转化成前、后、左、右四个方向完全同步的图像,显示屏播放转换后的图像,图像在成像装置前、后、左、右四个方向上的玻璃板上进行投影形成全息影像。显示装置可以是固定设置在外壳体顶面的显示屏,也可以是放置在外壳体顶面的终端设备,如平板电脑、笔记本电脑等。
如图2所示,本发明的一方面的另一实施例中还包括:
遥控模块600,用于获取用户的操作信息,并将操作信息传送至控制模块400;
语音模块700,包括语音特征模型库701和语音数据采集模块702,语音特征模型库701用于储存与三维眼球结构模型和医学资料模块200对应的语音特征模型,语音数据采集模块702用于采集并识别语音数据,以及将采集到的语音数据和语音特征模型比对匹配,并将匹配结果传送至控制模块400;和
服务模块800,包括预防模块801和体验模块802,预防模块801用于介绍各种眼部疾病的基本信息和预防知识,体验模块802提供眼睛治疗仿真场景。
遥控模块600用于获取用户的操作信息,并将操作信息传送至控制模块400。用户可以通过遥控模块600选择三维眼球结构模型的各个部位、预防模块801的眼部疾病的基本信息和预防知识、体验模块802的仿真场景等,并将操作信息传送至控制模块400。例如,用户通过遥控模块选择体验模块802中的近视矫正的仿真场景,则遥控模块生成相应的操作信息发送至控制模块400,控制模块400控制全息设备模块500播放近视矫正的仿真场景。
语音模块700包括语音特征模型库701和语音数据采集模块702。语音特征模型库701用于储存与眼球结构采集模块100和医学资料模块200对应的语音特征模型。语音数据采集模块702用于采集并识别语音数据。将采集到的语音数据和语音特征模型库701比对匹配,当语音数据与医学资料模块对应的语音特征模型相匹配时,生成触发信号发送至控制模块400;当语音数据与医学资料模块200对应的语音特征模型不匹配时,不生成触发信号。例如,语音特征模型为“近视”,当用户说出“近视”时,语音数据采集模块采集到语音数据“近视”并从语音特征模型库中匹配到“近视”的语音模型,语音模块生成触发信号发送至控制模块,控制模块控制全息设备模块播放近视的形成过程的视频和音频。
服务模块800与控制模块400连接,通过全息设备模块500展示眼球健康教育体验数据。服务模块800也与遥控模块600连接,用户通过遥控模块600选择服务模块800并生成用户操作信息发送至控制模块400。服务模块800包括预防模块801和体验模块802。其中,预防模块801用于介绍各种眼部疾病的基本信息和预防知识,可详细介绍眼科常见疾病的分类、内容涉及近视、远视、弱视等眼科知识。体验模块802用于提供眼睛治疗仿真场景,眼睛治疗仿真场景包括虚拟眼睛门诊治疗室、近视矫正、远视矫正、弱视矫正等治疗场景体验。把全息技术应用在眼睛健康宣教上,突破了传统健康宣教在时间和空间的限制,健康宣教不再是枯燥的知识讲解,多媒体宣教不再局限于图片和视频展示,眼疾患者可以直接参与到疾病介绍中,亲身去感受虚拟健康宣教环境,为眼疾患者提供了多种感官刺激,激发患者强烈的主动学习欲望,提高患者的学习眼睛疾病预防知识的兴趣,解决了部分患者没有参与动手操作的弊端。此外,有些危险系数高和难以开展的眼睛治疗操作和实际操作中不可能面面俱到的场景,都可以通过全息技术进行虚拟体验,这样可以增加眼睛健康教育的深度。采用眼睛健康教育虚拟仿真软件,只需要对软件内容进行扩展,让眼睛患者对新技术产品进行反复性学习,强化眼睛健康宣教的内容,增加了宣教的广度和深度。
如图3所示,本发明的另一方面的一实施例提供了一种用于眼球结构虚拟教学***的数字模型建立方法,包括以下步骤:
采集或导入眼球的结构数据;
储存或更新与眼球相关的健康与病变数据;
根据储存的眼球结构数据和健康病变数据生成三维眼球结构模型;
根据全息设备模块的设备参数,匹配动画演绎视频至三维眼球结构模型;
制作虚拟贴图、虚拟灯光及特效,并将虚拟贴图、虚拟灯光及特效导入全息设备模块渲染三维眼球结构模型;
获取用户的操作信息并生成控制指令;
根据控制指令播放三维眼球结构模型。
根据全息设备模块的设备参数,匹配动画演绎视频至三维眼球结构模型;在三维眼球结构模型的基础上全息设备模块采用融合变形编辑对柔性物体进行动画的制作,通过Maya和3dsMax完成不规则物品的挤压、拉伸、切开、扭曲及其他变形动画来模拟眼球内部虚拟***渲染产生的变化。
制作虚拟贴图、虚拟灯光及特效,并将虚拟贴图、虚拟灯光及特效导入全息设备模块渲染三维眼球结构模型;制作虚拟贴图,根据脚本,制作三维眼球结构模型的建模和动画制作。三维眼球结构模型的建模采用标准数据进行模型三维重构与拓扑,完成三维眼球结构模型的建模、优化、贴图和美化。制作虚拟灯光及特效,可以是通过虚拟模型定位机和运动机切换视角,模型光影随着视角的变化而变化,形成不同的场景。将虚拟贴图、虚拟灯光及特效导入全息设备模块,可以是通过3dsMax将三维眼球结构模型的全息模型和动画渲染生成与三维眼球结构模型相关动画演示相适应的灯光体系。通过分层渲染、对三维眼球结构模型的不同图层进行对应的独立调节输出系列帧文件,采用后期AfterEffect进行后期动态处理,生成和输出数字化内容,从而实现三维眼球结构模型的全息渲染效果。灯光载入需要通过调度虚拟摄像机的角度和机位进行渲染生成与三维眼球结构模型相关动画演示相适应的灯光体系和场景。具体渲染步骤为:对模型先赋好预设后,选择需要导入的模型,查看对应眼球的模型在场景中依次导入;保存成渲染文件;设置渲染层;预设好材质球,启用脚本,(框选需要赋材质的模型)赋予模型材质球。此方法对应运用到下面渲染层时候赋color材质球和赋detail材质球上;一般需要设置的渲染基本层为分为四大类:color、line、light、matte。Color分为:零部件层、眼球颜色(color)、眼球细节层(detail),眼球溢出层(push)。Group层级有多少层就分多少渲染层。
如图4所示,本发明的另一方面的另一实施例提供的用于眼球结构虚拟教学***的数字模型建立方法,还包括:输入逻辑控制运算方法,设定全息设备模块和遥控模块以实现全息设备模块和遥控模块的匹配。
数字化内容的生产流程,依照脚本流程,采用三维制作工具Maya和3dsMax进行制作、渲染和输出,通过Maya和AfterEffect进行数据预演和配置,将全息设备模块的参数、虚拟灯光、特效等配置文件统一打包。渲染生成的3D模型设有导播语音***、导播动画演绎及导播操作***,导播操作***中的逻辑控制遥控器通过调节虚拟灯光、特效等操作演示镜头。
如图5所示,本发明的另一方面的又一实施例公开的用于眼球结构虚拟教学***的数字模型建立方法,还包括:调整三维眼球结构模型的材质。
显示虚拟场景中的外层膜角膜和巩膜,中层膜葡萄膜,内层膜视网膜的成像动画。通过3dsMax逐层渲染三维眼球结构模型的材质,使角膜、房水、晶状体和玻璃体的光影效果更好。
在本申请所提供的几个实施例中,应该理解到,所揭露方法和装置,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点是,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理包括,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述收发方法的部分步骤。而前述的存储介质包括:U 盘、移动硬盘、只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
虽然通过参照本发明的某些优选实施方式,已经对本发明进行了图示和描述,但本领域的普通技术人员应该明白,以上内容是结合具体的实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。本领域技术人员可以在形式上和细节上对其作各种改变,包括做出若干简单推演或替换,而不偏离本发明的精神和范围。
Claims (8)
1.一种眼球结构虚拟教学***,其特征在于,包括:
眼球结构数据采集模块,用于采集或导入眼球的结构数据;
医学资料模块,用于储存或更新与眼球相关的健康与病变数据,并建立各个健康数据与病变数据的对应关系,所述病变数据包括眼球在近视过程中的变化;
数字模型模块,用于根据所述眼球结构数据和所述健康与病变数据生成三维眼球结构模型,所述数字模型模块采用融合变形编辑对柔性物体进行动画的制作,通过Maya和3dsMax模拟眼球内部渲染产生的变化,通过3dsMax逐层渲染三维眼球结构模型的材质,能够使角膜、房水、晶状体和玻璃体的光影效果更好,通过AfterEffect对三维眼球结构模型进行分层渲染,所述数字模型模块制作虚拟贴图,并根据脚本,制作三维眼球结构模型和动画;
控制模块,用于生成控制指令;
全息设备模块,所述全息设备模块与所述控制模块连接,用于根据所述控制指令播放三维眼球结构模型,所述全息设备模块包括外壳体、显示装置和成像装置,所述显示装置设置在所述外壳体的顶面,且所述显示装置的显示屏朝向所述外壳体的底面;所述成像装置是由四块玻璃板围成的四棱锥,所述成像装置固定设置在所述外壳体内,所述成像装置的底面设置在所述外壳体的底部,所述成像装置的顶点与所述显示屏中心重合,所述显示装置将所述三维眼球结构模型转化成前、后、左、右四个方向同步的图像,所述显示屏播放转换后的所述图像,所述图像在所述成像装置前、后、左、右四个方向上的玻璃板上进行投影形成全息影像。
2.如权利要求1所述的眼球结构虚拟教学***,其特征在于,所述三维眼球结构模型为图片、音频和视频的组合。
3.如权利要求1所述的眼球结构虚拟教学***,其特征在于,还包括:
遥控模块,用于获取用户的操作信息,并将所述操作信息传送至所述控制模块。
4.如权利要求1所述的眼球结构虚拟教学***,其特征在于,还包括:
语音模块,包括语音特征模型库和语音数据采集模块,所述语音特征模型库用于储存与所述三维眼球结构模型和所述医学资料对应的语音特征模型,所述语音数据采集模块用于采集并识别语音数据,以及将采集到的语音数据和所述语音特征模型比对匹配,并将匹配结果传送至所述控制模块。
5.如权利要求1-4中任一项所述的眼球结构虚拟教学***,其特征在于,还包括:
服务模块,包括预防模块和体验模块,所述预防模块用于介绍各种眼部疾病的基本信息和预防知识,所述体验模块提供眼睛治疗仿真场景。
6.一种用于眼球结构虚拟教学***的数字模型建立方法,包括以下步骤:
采集或导入眼球结构数据;
储存或更新与眼球相关的健康与病变数据,并建立各个健康数据与病变数据的对应关系,所述病变数据包括眼球在近视过程中的变化;
根据储存的所述眼球结构数据和所述健康与病变数据生成三维眼球结构模型;
根据全息影像设备的设备参数,匹配动画演绎视频至所述三维眼球结构模型;在所述三维眼球结构模型的基础上采用融合变形编辑对柔性物体进行动画的制作,通过Maya和3dsMax模拟眼球内部虚拟***渲染产生的变化;通过3dsMax逐层渲染三维眼球结构模型的材质,能够使角膜、房水、晶状体和玻璃体的光影效果更好;通过AfterEffect对三维眼球结构模型进行分层渲染;
制作虚拟贴图、虚拟灯光及特效,并将所述虚拟贴图、虚拟灯光及特效导入全息影像设备渲染所述三维眼球结构模型;
获取用户的操作信息并生成控制指令;
根据所述控制指令播放所述三维眼球结构模型;
所述全息影像设备包括外壳体、显示装置和成像装置,所述显示装置设置在所述外壳体的顶面,且所述显示装置的显示屏朝向所述外壳体的底面;所述成像装置是由四块玻璃板围成的四棱锥,所述成像装置固定设置在所述外壳体内,所述成像装置的底面设置在所述外壳体的底部,所述成像装置的顶点与所述显示屏中心重合,所述显示装置将所述三维眼球结构模型转化成前、后、左、右四个方向同步的图像,所述显示屏播放转换后的所述图像,所述图像在所述成像装置前、后、左、右四个方向上的玻璃板上进行投影形成全息影像。
7.如权利要求6所述的数字模型建立方法,其特征在于,还包括:输入逻辑控制运算方法,设定全息影像设备和遥控模块以实现全息影像设备和遥控模块的匹配。
8.如权利要求6-7中任一项所述的数字模型建立方法,其特征在于,还包括:调整三维眼球结构模型的材质。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010541563.7A CN111667906B (zh) | 2020-06-15 | 2020-06-15 | 一种眼球结构虚拟教学***及其数字模型建立方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010541563.7A CN111667906B (zh) | 2020-06-15 | 2020-06-15 | 一种眼球结构虚拟教学***及其数字模型建立方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111667906A CN111667906A (zh) | 2020-09-15 |
CN111667906B true CN111667906B (zh) | 2024-02-13 |
Family
ID=72387927
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010541563.7A Active CN111667906B (zh) | 2020-06-15 | 2020-06-15 | 一种眼球结构虚拟教学***及其数字模型建立方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111667906B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116646079B (zh) * | 2023-07-26 | 2023-10-10 | 武汉大学人民医院(湖北省人民医院) | 一种眼科病症辅助诊断方法及装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101477701A (zh) * | 2009-02-06 | 2009-07-08 | 南京师范大学 | 面向AutoCAD和3DS MAX软件的植入式真三维立体渲染方法 |
CN204614327U (zh) * | 2015-03-11 | 2015-09-02 | 上海市浦东新区潍坊社区卫生服务中心 | 眼底检查仿真教学仪 |
CN105117589A (zh) * | 2015-08-13 | 2015-12-02 | 丁琴 | 高仿真多媒体眼科医患沟通*** |
CN108066006A (zh) * | 2016-11-11 | 2018-05-25 | 鸿富锦精密工业(深圳)有限公司 | 视力矫正效果模拟***及方法 |
CN109979600A (zh) * | 2019-04-23 | 2019-07-05 | 上海交通大学医学院附属第九人民医院 | 基于虚拟现实的眼眶手术训练方法、***和存储介质 |
CN110174953A (zh) * | 2019-07-01 | 2019-08-27 | 苏州蓝软智能医疗科技有限公司 | 基于混合现实技术的假体置换手术模拟***及构建方法 |
CN111128367A (zh) * | 2020-01-13 | 2020-05-08 | 浙江清华柔性电子技术研究院 | 眼部的建模和仿真方法及*** |
CN111223576A (zh) * | 2020-01-14 | 2020-06-02 | 于金明 | 基于虚拟智能医疗平台的患者宣教*** |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10859857B2 (en) * | 2016-03-22 | 2020-12-08 | Johnson & Johnson Vision Care, Inc. | Pulsed plus lens designs for myopia control, enhanced depth of focus and presbyopia correction |
-
2020
- 2020-06-15 CN CN202010541563.7A patent/CN111667906B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101477701A (zh) * | 2009-02-06 | 2009-07-08 | 南京师范大学 | 面向AutoCAD和3DS MAX软件的植入式真三维立体渲染方法 |
CN204614327U (zh) * | 2015-03-11 | 2015-09-02 | 上海市浦东新区潍坊社区卫生服务中心 | 眼底检查仿真教学仪 |
CN105117589A (zh) * | 2015-08-13 | 2015-12-02 | 丁琴 | 高仿真多媒体眼科医患沟通*** |
CN108066006A (zh) * | 2016-11-11 | 2018-05-25 | 鸿富锦精密工业(深圳)有限公司 | 视力矫正效果模拟***及方法 |
CN109979600A (zh) * | 2019-04-23 | 2019-07-05 | 上海交通大学医学院附属第九人民医院 | 基于虚拟现实的眼眶手术训练方法、***和存储介质 |
CN110174953A (zh) * | 2019-07-01 | 2019-08-27 | 苏州蓝软智能医疗科技有限公司 | 基于混合现实技术的假体置换手术模拟***及构建方法 |
CN111128367A (zh) * | 2020-01-13 | 2020-05-08 | 浙江清华柔性电子技术研究院 | 眼部的建模和仿真方法及*** |
CN111223576A (zh) * | 2020-01-14 | 2020-06-02 | 于金明 | 基于虚拟智能医疗平台的患者宣教*** |
Non-Patent Citations (2)
Title |
---|
"基于多层液晶的近眼三维显示研究";丁俊;《中国优秀硕士学位论文全文数据库 (信息科技辑)》;20170315;全文 * |
沙丽华等编著.《生物教学问题》.辽宁师范大学出版社,2000,全部. * |
Also Published As
Publication number | Publication date |
---|---|
CN111667906A (zh) | 2020-09-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8953909B2 (en) | System, method, and computer software code for mimic training | |
US10908421B2 (en) | Systems and methods for personal viewing devices | |
CN108369457A (zh) | 用于混合现实的现实混合器 | |
CN109564706A (zh) | 基于智能交互式增强现实的用户交互平台 | |
CN107643597A (zh) | 统合实境智慧眼镜护眼遮光器 | |
EP4248413A1 (en) | Multiple device sensor input based avatar | |
JP2023511107A (ja) | 中立アバタ | |
CN106774929A (zh) | 一种虚拟现实终端的显示处理方法和虚拟现实终端 | |
EP2583131B1 (en) | Personal viewing devices | |
US20230171484A1 (en) | Devices, methods, and graphical user interfaces for generating and displaying a representation of a user | |
CN111667906B (zh) | 一种眼球结构虚拟教学***及其数字模型建立方法 | |
CN111276022A (zh) | 一种基于vr技术的胃镜模拟操作*** | |
US20200349766A1 (en) | Methods and Systems for Viewing and Editing AR/VR Computer-based Designs Allowing Impaired Vision Simulation | |
WO2023237023A1 (zh) | 图像处理方法、装置、存储介质及头显设备 | |
WO2023181072A1 (en) | Digital system and 3d tool for training and medical counselling in ophthalmology | |
CN104182979A (zh) | 一种视力障碍模拟方法及装置 | |
CN108234986B (zh) | 用于治疗近视或弱视的3d图像管理方法及管理***和装置 | |
US10992984B2 (en) | Multiple data sources of captured data into single newly rendered video feed | |
US20180286125A1 (en) | Deteriorated video feed | |
US20240221292A1 (en) | Light normalization in combined 3d user representations | |
US11908098B1 (en) | Aligning user representations | |
US11823343B1 (en) | Method and device for modifying content according to various simulation characteristics | |
EP4300447A1 (en) | User representation using depths relative to multiple surface points | |
WO2023243093A1 (ja) | データ端末及びデータ端末の3d画像表示方法、並びにデータ処理システム | |
CN118279472A (zh) | 组合3d用户表示中的光归一化 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |