CN209358681U - 一种应用于手术室内的裸眼3d人眼追踪设备 - Google Patents

一种应用于手术室内的裸眼3d人眼追踪设备 Download PDF

Info

Publication number
CN209358681U
CN209358681U CN201920128841.9U CN201920128841U CN209358681U CN 209358681 U CN209358681 U CN 209358681U CN 201920128841 U CN201920128841 U CN 201920128841U CN 209358681 U CN209358681 U CN 209358681U
Authority
CN
China
Prior art keywords
human eye
module
visible area
eye
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201920128841.9U
Other languages
English (en)
Inventor
李国新
胡彦锋
何雨桐
宋琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Apricot Rain Mdt Infotech Ltd
Original Assignee
Guangzhou Apricot Rain Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Apricot Rain Mdt Infotech Ltd filed Critical Guangzhou Apricot Rain Mdt Infotech Ltd
Priority to CN201920128841.9U priority Critical patent/CN209358681U/zh
Application granted granted Critical
Publication of CN209358681U publication Critical patent/CN209358681U/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)

Abstract

本实用新型公开了一种应用于手术室内的祼眼3D人眼追踪设备,属于医疗设备领域,通过控制模块和人眼追踪模块,在众多医务人员中确定目标追踪对象并进行人眼追踪;理想可视区域判断模块、理想可视区域调整模块和3D图像合成模块,对主刀医生移动中的双眼进行追踪获得主刀医生双眼瞳孔之间的距离和双眼至裸眼3D屏幕中心的距离,获得双眼位置信息来判断理想可视区域是否落入主刀医生的双眼位置处,若未落入理想可视区域,则通过调节光栅的偏转角来移动理想可视区域的位置,使理想可视区域落入主刀医生的双眼位置处,然后再将主刀医生的双眼位置信息和从腔镜获得的病人的图像进行合成为3D图像信息,最后通过祼眼3D显示屏将3D图像呈现出来。

Description

一种应用于手术室内的裸眼3D人眼追踪设备
技术领域
本实用新型涉及医疗设备领域,更具体的,涉及一种应用于手术室内的裸眼3D人眼追踪设备。
背景技术
裸眼3D技术是根据人眼的视差来实现的,即人的左眼和右眼在观察同一个目标时会有图像上的差异,左眼看到的影像跟右眼看到的影像在大脑里合成就成为我们看到的3D内容。由此,通过在屏幕上做一些处理,将存在视差的图像分别映射到人的左眼和右眼,人看起来就是3D影像了裸眼3D技术是根据人眼的视差来实现的,即人的左眼和右眼在观察同一个目标时会有图像上的差异,左眼看到的影像跟右眼看到的影像在大脑里合成就成为我们看到的3D内容。由此,通过在屏幕上做一些处理,将存在视差的图像分别映射到人的左眼和右眼,人看起来就是3D影像了。
裸眼3D应用于手术中还未普及,还存在一些技术问题需要解决。比如,在手术室中,除了主刀医生外,还有其它同事等人员,如何从众多戴口罩戴帽子服装一致的医务人员当中捕捉到要进行人眼追踪的目标;此外,在手术过程中,主刀医生的头部是具有移动的,如何在头部移动的情况下,依然使从病人处获取的图像清晰地通过显示屏呈现出来,也是需要解决的问题;造成裸眼3D技术无法大规模推广应用于临床手术,为此科技部推出国家重点研发计划数字诊疗装备研发《胃癌腔镜手术精准规划和实时导航的解决方案研究》2017YFC0108300,推进裸眼3D技术落地应用。
综上所述,有必要设计一种应用于手术室内的裸眼3D人眼追踪设备来解决上述问题。
实用新型内容
为了克服现有技术的缺陷,本实用新型所要解决的技术问题在于提出一种应用于手术室内的裸眼3D人眼追踪设备,可以在手术室内从众多戴口罩戴帽子服装一致的医务人员中通过标签信息捕捉到要进行人眼追踪的目标对象,并且在主刀医生头部移动的情况下,也能无延时的捕捉腔镜画面,清晰地通过裸眼3D显示屏呈现出来进行手术,避免了由于主刀医生戴口罩和帽子无法识别定位的问题,比传统的人脸面部识别定位方法或技术更加适应于医疗手术间的特殊场景,使裸眼3D技术可以大规模地推广应用于临床手术。
为达此目的,本实用新型采用以下技术方案:
本实用新型提供了一种应用于手术室内的裸眼3D人眼追踪设备,包括:腔镜,所述腔镜用于获取病人身体内部的图像信息;
裸眼3D显示屏,设有3D图像合成模块及图像显示模块,所述3D图像合成模块将从所述人眼追踪识别模块处获取的人眼追踪对象的人眼信息和从所述腔镜获取的图像信息合成为3D图像信息,图像显示模块将所述3D图像信息进行显示,呈现出3D图像;
主机,主机内设有人眼追踪识别模块和控制模块,所述控制模块根据所述摄像头获取的标签信息确定人眼追踪对象,并将人眼信息发送给所述人眼追踪识别模块,所述人眼追踪识别模块对人眼追踪对象的双眼进行追踪,并将所述人眼追踪对象的人眼信息进行识别,并将识别结果传递给3D图像合成模块;
摄像装置,所述摄像装置内设有摄像头,所述摄像头用于获取标签与人眼信息;
***运行监视屏,所述***运行监视屏与所述主机通讯连接。
可选地,所述主机内还设有理想可视区域判断模块和理想可视区域调整模块,所述理想可视区域判断模块用于判断理想可视区域是否落入人眼追踪对象的双眼位置处,所述理想可视区域调整模块用于调整光栅的偏转角使理想可视区域发生偏移,进而使所述理想可视区域落入人眼追踪对象的双眼位置处。
可选地,所述腔镜通过SDI/DVI线与所述裸眼3D显示屏连接。
可选地,所述摄像头包括第一摄像头和第二摄像头,所述第一摄像头与所述第二摄像头水平设置。
本实用新型的有益效果为:
本实用新型提供的一种应用于手术室内的裸眼3D人眼追踪设备,主机内设有人眼追踪识别模块和控制模块,控制模块根据摄像头获取的标签信息确定人眼追踪对象,并将人眼信息发送给人眼追踪识别模块,人眼追踪识别模块对人眼追踪对象的双眼进行追踪,并将人眼追踪对象的人眼信息进行识别,并将识别结果传递给3D图像合成模块;3D图像合成模块将从人眼追踪识别模块处获取的人眼追踪对象的人眼信息和从腔镜获取的图像信息合成为3D图像信息,图像显示模块将3D图像信息进行显示,呈现出3D图像;主机内还设有理想可视区域判断模块和理想可视区域调整模块,理想可视区域判断模块用于判断理想可视区域是否落入人眼追踪对象的双眼位置处,理想可视区域调整模块用于调整光栅的偏转角使理想可视区域发生偏移,进而使理想可视区域落入人眼追踪对象的双眼位置处。免去了主刀医生戴3D眼镜带来的不适感、压迫感、眩晕感,以及因光线和清晰度不够带来的图像显示不清楚等问题,进而使得裸眼3D图像更精准地在手术室内呈现;此外,避免了由于主刀医生戴口罩和帽子无法识别定位的问题,比传统的人脸面部识别定位方法或技术更加适应于医疗手术间的特殊场景,使裸眼3D技术可以大规模地推广应用于临床手术。
附图说明
图1是本实用新型具体实施方式提供的一种应用于手术室内的裸眼3D人眼追踪设备对应的方法流程图;
图2是本实用新型具体实施方式提供的一种应用于手术室内的裸眼3D人眼追踪设备的电路连接图;
图3是本实用新型具体实施方式提供的一种应用于手术室内的裸眼3D人眼追踪设备的立体结构示意图;
图4是本实用新型具体实施方式提供的另一角度的一种应用于手术室内的裸眼3D人眼追踪设备的立体结构示意图;
图5是本发明具体实施方式提供的一种应用于手术室内的裸眼3D人眼追踪设备的左视图;
图6是本发明具体实施方式提供的一种应用于手术室内的裸眼3D人眼追踪设备的主视图;
图7是本发明具体实施方式提供的图3中A处的局部放大图;
图8是本实用新型提供的目标对象邻近眼球外周处位于眼皮上的均匀分布的特征点的位置示意图。
图中:
1-腔镜;2-摄像装置;21-摄像头;211-第一摄像头;212-第二摄像头;3-主机;31-人眼追踪识别模块;32-控制模块;33-理想可视区域判断模块;34-理想可视区域调整模块;4-裸眼3D显示屏;41-3D图像合成模块;42-图像显示模块;5-标签;6-***运行监视屏;7-帽子;8-手术床;9-灯;10-天花板。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本实用新型的技术方案。
图1实例性地示出了本实用新型提供的一种应用于手术室内的裸眼3D人眼追踪设备对应的方法流程图;图2实例性地示出了本实用新型提供的一种应用于手术室内的裸眼3D人眼追踪设备的电路连接图;图3实例性地示出了本实用新型提供的一种应用于手术室内的裸眼3D人眼追踪设备的立体结构示意图;图4实例性地示出了本实用新型提供的另一角度的一种应用于手术室内的裸眼3D人眼追踪设备的立体结构示意图;图5实例性地示出了本发明提供的一种应用于手术室内的裸眼3D人眼追踪设备的左视图;图6实例性地示出了本发明提供的一种应用于手术室内的裸眼3D人眼追踪设备的主视图;图7实例性地示出了本发明提供的图3中A处的局部放大图;图8实例性地示出了本实用新型提供的目标对象邻近眼球外周处位于眼皮上的均匀分布的特征点的位置示意图。如图1至图5所示,一种应用于手术室内的裸眼3D人眼追踪设备,包括:腔镜1,腔镜1用于获取病人身体内部的图像信息;腔镜1是集中了传统光学、人体工程学、精密机械、现代电子、数学、软件等于一体的检测仪器;一个具有图像传感器、光学镜头、光源照明、机械装置,医生可以利用腔镜1可以看到X射线不能显示的病变;医生将腔镜1***至病人的体内,腔镜1将获取病人身体内的图像信息;摄像装置2,摄像装置2内设有摄像头21,摄像头21用于获取标签与人眼信息;摄像头21为深度摄像头;主机3内设有人眼追踪识别模块31和控制模块32,控制模块31根据摄像头21获取的标签信息确定人眼追踪对象,对目标对象进行人眼追踪,是通过获取目标对象邻近眼球外周处位于眼皮上的均匀分布的特征点E1至E14来进行追踪的,控制模块31将人眼信息发送给人眼追踪识别模块31,人眼追踪识别模块31对人眼追踪对象的双眼进行追踪,将人眼追踪对象的人眼信息进行识别,并将识别结果传递给3D图像合成模块41;裸眼3D显示屏4,设有3D图像合成模块41及图像显示模块42,3D图像合成模块41将从人眼追踪识别模块31处获取的人眼追踪对象的人眼信息和从腔镜1处获取的图像信息合成为3D图像信息,图像显示模块42将3D图像信息进行显示,呈现出3D图像。腔镜通过SDI/DVI线与裸眼3D显示屏连接。还包括***运行监视屏6,***运行监视屏6与主机3通讯连接。摄像头21包括第一摄像头211和第二摄像头212,第一摄像头211与第二摄像头212水平设置。第一摄像头211和第二摄像头212的连线与标签5最底边的边线平行。主机3内还设有理想可视区域判断模块33和理想可视区域调整模块34,理想可视区域判断模块33用于判断理想可视区域是否落入人眼追踪对象的双眼位置处,理想可视区域调整模块34用于调整光栅的偏转角使理想可视区域发生偏移,进而使理想可视区域落入人眼追踪对象的双眼位置处。通过调整光栅模块调整图像显示,是通过调整光栅的偏转角实现调整图像显示。因此,通过确认标签信息,标签信息为红色。标签5贴于主刀医生的帽子7上。帽子7为手术室专用帽。腔镜1位于手术床8的上方。手术床8的上方安装有灯9,灯9固定于天花板10上。灯9可使手术床8周围的光线保持光亮,同时也使标签5处的光线充足,从而使摄像头21更精准地捕捉到标签5的图像信息。本实用新型技术方案中的腔镜1也可以换成内窥镜。标签5的颜色为红色,形状可以是长方形,但不限于长方形。还包括***运行监视屏6;***运行监视屏6与主机3通讯连接。***运行监视屏6与主机可以通过DVI、VGA、或HDMI中的任意一种线连接。***运行监视屏6内设有监视模块,可以监控和实时呈现手术室内灯光的亮度值,主刀医生的双眼至裸眼3D显示屏4之间的距离等值,对手术过程中的环境信息进行有效监控,保障手术顺利进行。手术室内从众多戴口罩戴帽子服装一致的医务人员中通过捕捉标签5的图像信息捕捉到要进行人眼追踪的目标对象,通过主刀医生的眼睛和眉毛周围的信息进行人眼追踪。免去了主刀医生戴3D眼镜带来的不适感、压迫感、眩晕感,以及因光线和清晰度不够带来的图像显示不清楚等问题,进而使得裸眼3D图像更精准地在手术室内呈现;此外,还能从手术室的众多戴口罩戴帽子服装一致的医务人员中捕捉到戴有标签的主刀医生,比传统的人脸面部识别定位方法或技术更加适应于医疗手术间的特殊场景,使裸眼3D技术可以大规模地推广应用于临床手术。
本实用新型是通过优选实施例进行描述的,本领域技术人员知悉,在不脱离本实用新型的精神和范围的情况下,可以对这些特征和实施例进行各种改变或等效替换。本实用新型不受此处所公开的具体实施例的限制,其他落入本申请的权利要求内的实施例都属于本实用新型保护的范围。

Claims (4)

1.一种应用于手术室内的裸眼3D人眼追踪设备,其特征在于,包括:
腔镜,所述腔镜用于获取病人身体内部的图像信息;
裸眼3D显示屏,设有3D图像合成模块及图像显示模块,所述3D图像合成模块将从所述人眼追踪识别模块处获取的人眼追踪对象的人眼信息和从所述腔镜获取的图像信息合成为3D图像信息,图像显示模块将所述3D图像信息进行显示,呈现出3D图像;
主机,主机内设有人眼追踪识别模块和控制模块,所述控制模块根据摄像头获取的标签信息确定人眼追踪对象,并将人眼信息发送给所述人眼追踪识别模块,所述人眼追踪识别模块对人眼追踪对象的双眼进行追踪,并将所述人眼追踪对象的人眼信息进行识别,并将识别结果传递给3D图像合成模块;
摄像装置,所述摄像装置内设有摄像头,所述摄像头用于获取标签与人眼信息;
***运行监视屏,所述***运行监视屏与所述主机通讯连接。
2.如权利要求1所述的一种应用于手术室内的裸眼3D人眼追踪设备,其特征在于:
所述主机内还设有理想可视区域判断模块和理想可视区域调整模块,所述理想可视区域判断模块用于判断理想可视区域是否落入人眼追踪对象的双眼位置处,所述理想可视区域调整模块用于调整光栅的偏转角使理想可视区域发生偏移,进而使所述理想可视区域落入人眼追踪对象的双眼位置处。
3.如权利要求1所述的一种应用于手术室内的裸眼3D人眼追踪设备,其特征在于:
所述腔镜通过SDI/DVI线与所述裸眼3D显示屏连接。
4.如权利要求1所述的一种应用于手术室内的裸眼3D人眼追踪设备,其特征在于:
所述摄像头包括第一摄像头和第二摄像头,所述第一摄像头与所述第二摄像头水平设置。
CN201920128841.9U 2019-01-25 2019-01-25 一种应用于手术室内的裸眼3d人眼追踪设备 Active CN209358681U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201920128841.9U CN209358681U (zh) 2019-01-25 2019-01-25 一种应用于手术室内的裸眼3d人眼追踪设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201920128841.9U CN209358681U (zh) 2019-01-25 2019-01-25 一种应用于手术室内的裸眼3d人眼追踪设备

Publications (1)

Publication Number Publication Date
CN209358681U true CN209358681U (zh) 2019-09-06

Family

ID=67803391

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201920128841.9U Active CN209358681U (zh) 2019-01-25 2019-01-25 一种应用于手术室内的裸眼3d人眼追踪设备

Country Status (1)

Country Link
CN (1) CN209358681U (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109688403A (zh) * 2019-01-25 2019-04-26 广州杏雨信息科技有限公司 一种应用于手术室内的裸眼3d人眼追踪方法及其设备
CN114584754A (zh) * 2022-02-28 2022-06-03 广东未来科技有限公司 3d显示方法及相关装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109688403A (zh) * 2019-01-25 2019-04-26 广州杏雨信息科技有限公司 一种应用于手术室内的裸眼3d人眼追踪方法及其设备
CN114584754A (zh) * 2022-02-28 2022-06-03 广东未来科技有限公司 3d显示方法及相关装置
CN114584754B (zh) * 2022-02-28 2023-12-26 广东未来科技有限公司 3d显示方法及相关装置

Similar Documents

Publication Publication Date Title
US11734901B2 (en) Surgeon head-mounted display apparatuses
EP3204816B1 (en) Head-mounted displaying of magnified images locked on an object of interest
KR100949743B1 (ko) 고글 형태를 갖는 착용형 시선 추적 장치 및 방법
CN104918572B (zh) 用于外科手术的视频捕获和显示的数字***
CN107092346B (zh) 一种信息处理方法及电子设备
JP2008516727A (ja) デジタル眼科ワークステーション
JP2013545557A (ja) 立体視ビデオ画像を観察および追跡するためのシステムおよび方法
KR101667152B1 (ko) 수술 지원 영상을 제공하는 스마트 글라스 시스템 및 스마트 글라스를 이용한 수술 지원 영상 제공 방법
CN109688403A (zh) 一种应用于手术室内的裸眼3d人眼追踪方法及其设备
CN209358681U (zh) 一种应用于手术室内的裸眼3d人眼追踪设备
US11698535B2 (en) Systems and methods for superimposing virtual image on real-time image
CN108446011A (zh) 一种基于增强现实的医疗辅助方法及设备
CN110472546B (zh) 一种婴幼儿非接触式眼动特征提取装置及方法
CN206434426U (zh) 3d头盔式手术显微镜***
CN107913107A (zh) 3d头盔式手术显微镜***
CN209358682U (zh) 一种用于外科手术的3d/2d可自由切换的显示设备
CN112353503A (zh) 一种用于术中实时照明拍照摄像的智能眼镜
KR20190065718A (ko) 홍채 촬영 장치 및 이를 이용한 홍채 분석 시스템

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant