CN114587650B - 一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及*** - Google Patents
一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及*** Download PDFInfo
- Publication number
- CN114587650B CN114587650B CN202210115261.2A CN202210115261A CN114587650B CN 114587650 B CN114587650 B CN 114587650B CN 202210115261 A CN202210115261 A CN 202210115261A CN 114587650 B CN114587650 B CN 114587650B
- Authority
- CN
- China
- Prior art keywords
- coordinate system
- marker
- coordinate
- orifice
- under
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 239000003550 marker Substances 0.000 claims abstract description 137
- 210000004262 dental pulp cavity Anatomy 0.000 claims abstract description 30
- 238000013135 deep learning Methods 0.000 claims abstract description 7
- 210000004746 tooth root Anatomy 0.000 claims description 84
- 239000011521 glass Substances 0.000 claims description 41
- 238000006243 chemical reaction Methods 0.000 claims description 21
- 238000004519 manufacturing process Methods 0.000 claims description 7
- 239000003086 colorant Substances 0.000 claims description 6
- 210000000214 mouth Anatomy 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 6
- 238000012800 visualization Methods 0.000 claims description 5
- 210000003298 dental enamel Anatomy 0.000 description 1
- 208000007147 dental pulp necrosis Diseases 0.000 description 1
- 210000004268 dentin Anatomy 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 208000015181 infectious disease Diseases 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
- A61C5/00—Filling or capping teeth
- A61C5/40—Implements for surgical treatment of the roots or nerves of the teeth; Nerve needles; Methods or instruments for medication of the roots
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/361—Image-producing devices, e.g. surgical cameras
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
- A61C19/00—Dental auxiliary appliances
- A61C19/06—Implements for therapeutic treatment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/101—Computer-aided simulation of surgical operations
- A61B2034/105—Modelling of the patient, e.g. for ligaments or bones
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/107—Visualisation of planned trajectories or target regions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/108—Computer aided selection or customisation of medical implants or cutting guides
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Medical Informatics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Molecular Biology (AREA)
- Heart & Thoracic Surgery (AREA)
- Dentistry (AREA)
- Robotics (AREA)
- Pathology (AREA)
- Epidemiology (AREA)
- Gynecology & Obstetrics (AREA)
- Radiology & Medical Imaging (AREA)
- Neurology (AREA)
- Neurosurgery (AREA)
- Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
发明提供了一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及***,属于根管治疗领域,该方法通过分别在患者牙齿上预装第一标识物和第二标识物,以第一标识物和第二标识物为基点,基于AI深度学习算法和图像识别算法对牙齿根管口的形状和位置进行识别标记,并将牙齿根管口标记点与第一标识物在世界坐标系下的坐标位置匹配,获取牙齿根管口标记点在投影坐标系下的坐标位置;将第二标识物在投影坐标下的坐标位置与牙齿根管口标记点在投影坐标系下的坐标位置匹配,获取第二标识物与牙齿根管口标记点在投影坐标系下的相对位置。本发明能够有效的对根管进行精准导航辅助治疗,从而提高根管治疗的效率和准确性。
Description
技术领域
发明属于根管治疗技术领域,尤其涉及一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及***。
背景技术
根管口是指髓室与根管的交界处,或髓室底与根管的移行部。根管口的定位是每一个根管正确定位的关键步骤。单根管牙的髓室与根管为连续的管状,很难从形态上辨认根管口;多牙根呈漏斗状的根管口,但要仔细的处理牙冠部髓室里的内容物后才能找到根管口。
根管治疗术又称牙髓治疗,是牙医学中治疗牙髓坏死和牙根感染的一种手术,该手术保留了牙齿,因而与拔牙术互补,手术繁琐,一般要2-4次就诊才能完成。随着技术和材料的发展,一次性的根管治疗被更多的医生和患者接受,无痛治疗在临床上也得到了广泛的应用,治疗不再痛苦。
临床上,多根管牙因某些原因,寻找根管口比较困难,传统的根管口定位方法不是过度损伤牙本质或牙釉质,就是误差较大,大多还需凭借医师自身经验去假设性判断,对于操作和实施存在试错的风险。
发明内容
发明实施例提供一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及***,旨在解决背景技术中提出的问题。
发明实施例是这样实现的,一种基于混合现实技术的牙齿根管口治疗辅助导航的方法,该辅助导航方法包括:
在患者牙齿和操作器械上分别预装第一标识物和第二标识物;
获取患者口腔内的CT影像数据,并利用CT影像数据制作患者牙齿的AR显示模型;
基于AI深度学习算法和图像识别算法对AR显示模型进行识别,获取牙齿根管口的根管形状和位置,并在AR显示模型上用颜色进行标记;
利用AR眼镜上的双目相机分别对第一标识物和第二标识物进行扫描,获取第一标识物图像和第二标识物图像;
分别对第一标识物图像和第二标识物图像应用基于双目视觉slam算法,获取第一标识物和第二标识物在双目相机坐标系下的坐标位置;
将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置后与AR显示模型中牙齿根管口标记点进行配准,获取牙齿根管口标记点在世界坐标系下的坐标位置;
将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置;
将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置;
将第二标识物在投影坐标系下的坐标位置与牙齿根管口标记点在投影坐标系下的坐标位置进行匹配,获取第二标识物与牙齿根管口标记点的相对位置关系。
优选的,所述利用CT影像数据制作患者牙齿的AR显示模型,包括:
通过三维可视化工具提取患者牙齿特征数据,并生成三角网格图;
将三角网格图转换为stl格式文件;
调取stl格式文件的内容制作患者牙齿的AR显示模型。
优选的,所述将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置,包括:
根据双目相机坐标系与AR眼镜坐标系的转换关系,将第一标识物在双目相机坐标系下的坐标位置转换为第一标识物在AR眼镜坐标系下的坐标位置;
根据AR眼镜坐标系与世界坐标系的转换关系,将标志物在AR眼镜坐标系下的坐标位置转换为标志物在世界坐标系下的坐标位置。
优选的,所述将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置,包括:
根据AR眼镜坐标系与世界坐标系的转换关系,将牙齿根管标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在AR眼镜坐标系下的坐标位置;
根据AR眼镜坐标系与投影坐标系的转换关系,将牙齿根管标记点在AR眼镜坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置。
优选的,所述将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置,包括:
根据双目相机坐标系与AR眼镜坐标系的坐标转换关系,将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在AR眼镜坐标系下的坐标位置;
根据AR眼镜坐标系与投影坐标系的坐标转换关系,将第二标识物在AR眼镜坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置。
优选的,所述相对位置关系包括方向、角度和距离。
优选的,所述三维可视化工具至少包括MIMICS软件工具、Amira软件工具、Avizo软件工具以及ORS Visual软件工具中的一种。
优选的,所述将三角网格图转换为stl格式文件通过ORS Visual软件工具进行格式转换。
优选的,所述调取stl格式文件的内容制作患者牙齿的AR显示模型通过Unity实时内容开发平台调取stl格式文件的内容进行患者牙齿的AR显示模型制作。
一种基于混合现实技术的牙齿根管口治疗辅助导航的***,该***用于执上述的方法,该***包括处理器以及AR眼镜;
分别在患者牙齿和操作器械上预装第一标识物和第二标识物;
所述处理器接收患者口腔内的CT影像数据,利用CT影像数据制作患者牙齿的AR显示模型,并基于AI深度学习算法和图像识别算法对AR显示模型进行识别,获取牙齿根管口的根管形状和位置,并在AR显示模型上用颜色标记;
利用所述AR眼镜上的双目相机分别对第一标识物和第二标识物进行扫描,获取第一标识物图像和第二标识物图像;
所述处理器分别对第一标识物图像和第二标识物图像应用slam算法,获取第一标识物和第二标识物在双目相机坐标系下的坐标位置;
所述处理器将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置后与AR显示模型中牙齿根管口标记点进行配准,获取牙齿根管口标记点在世界坐标系下的坐标位置,并将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置;
所述处理器将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置,并将第二标识物在投影坐标系下的坐标位置与牙齿根管口标记点在投影坐标系下的坐标位置匹配,获取第二标识物与牙齿根管口标记点在投影坐标系下的相对位置关系。
本发明可有效地对牙齿根管口进行精准定位,并实时获取操作器械在投影坐标系下的坐标位置,进而获取操作器械与牙齿根管口的相对位置,根据操作器械与牙齿根管口的相对位置移动操作器械,从而对根管进行精准导航辅助治疗,有效地提高根管治疗的效率和准确性。
附图说明
图1是一种基于混合现实技术的牙齿根管口治疗辅助导航的方法的流程示意图;
图2是利用CT影像数据制作患者牙齿的AR显示模型的流程示意图;
图3是获取第一标识物在世界坐标系下的坐标位置的流程示意图;
图4是获取牙齿根管口标记点在投影坐标系下的坐标位置的流程示意图;
图5是获取第二标识物在投影坐标系下的坐标位置的流程示意图;
图6是一种基于混合现实技术的牙齿根管口治疗辅助导航的***的***架构示意图。
具体实施方式
为了使发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释发明,并不用于限定发明。
本发明提供一种基于混合现实技术的牙齿根管口治疗辅助导航的方法,如图1所示,该辅助导航方法包括:
S1、在患者牙齿和操作器械上分别预装第一标识物和第二标识物;
S2、获取患者口腔内的CT影像数据,并利用CT影像数据制作患者牙齿的AR显示模型;
S3、基于AI深度学习算法和图像识别算法对AR显示模型进行识别,获取牙齿根管口的根管形状和位置,并在AR显示模型上用颜色进行标记;
S4、利用AR眼镜上的双目相机分别对第一标识物和第二标识物进行扫描,获取第一标识物图像和第二标识物图像;
S5、分别对第一标识物图像和第二标识物图像应用基于双目视觉slam算法,获取第一标识物和第二标识物在双目相机坐标系下的坐标位置;
S6、将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置后与AR显示模型中牙齿根管口标记点进行配准,获取牙齿根管口标记点在世界坐标系下的坐标位置;
S7、将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置;
S8、将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置;
S9、将第二标识物在投影坐标系下的坐标位置与牙齿根管口标记点在投影坐标系下的坐标位置进行匹配,获取第二标识物与牙齿根管口标记点的相对位置关系;其中,所述相对位置关系包括方向、角度和距离。
该方法通过分别在患者牙齿上预装第一标识物和第二标识物,以第一标识物和第二标识物为基点,分别获取第一标识物和第二标识物在双目相机坐标系下的坐标位置,将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置,并基于AI深度学习算法和图像识别算法对牙齿根管口的形状和位置进行识别标记,并将牙齿根管口标记点与第一标识物在世界坐标系下的坐标位置匹配,获取牙齿根管口标记点在世界坐标系下的坐标位置,将牙齿根管口标记点在世界坐标系下的坐标位置转换为投影坐标系下的坐标位置;将第二标识物在双目相机坐标系下的坐标位置转换为投影坐标下的坐标位置后与牙齿根管口标记点在投影坐标系下的坐标位置匹配,获取第二标识物与牙齿根管口标记点在投影坐标系下的相对位置,根据第二标识物与牙齿根管口标记点的相对位置进行操作、治疗。
可以进一步理解的是,在实际应用中,第二标识物在投影坐标下的坐标位置可以作为操作器械在投影坐标系下的坐标位置,而为了操作器械的位置定位精准,可根据第二标识物与操作器械的坐标转换关系,获得操作器械在投影坐标系下的坐标位置,即最终获得操作器械与牙齿根管口标记点在投影坐标系下的相对位置,根据操作器械与牙齿根管口标记点在投影坐标系下的相对位置,调整操作器械的位置进行操作、治疗,进而有效地提高根管治疗的效率与准确性。
上述方案的S2中,如图2所示,所述利用CT影像数据制作患者牙齿的AR显示模型,包括:
S21、通过MIMICS软件、Amira软件、Avizo软件、ORS Visual软件等三维可视化工具提取患者牙齿特征数据,并生成三角网格图;
S22、通过ORS Visual软件工具将三角网格图转换为stl格式文件;
S23、通过Unity实时内容开发平台调取stl格式文件的内容制作患者牙齿的AR显示模型。
上述方案的S6中,如图3所示,所述将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置,包括:
S61、根据双目相机坐标系与AR眼镜坐标系的转换关系,将第一标识物在双目相机坐标系下的坐标位置转换为第一标识物在AR眼镜坐标系下的坐标位置;
S62、根据AR眼镜坐标系与世界坐标系的转换关系,将第一标识物在AR眼镜坐标系下的坐标位置转换为第一标识物在世界坐标系下的坐标位置。
上述方案的S7中,如图4所示,所述将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置,包括:
S71、根据AR眼镜坐标系与世界坐标系的转换关系,将牙齿根管标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在AR眼镜坐标系下的坐标位置;
S72、根据AR眼镜坐标系与投影坐标系的转换关系,将牙齿根管标记点在AR眼镜坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置。
上述方案的S8中,如图5所示,所述将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置,包括:
S81、根据双目相机坐标系与AR眼镜坐标系的坐标转换关系,将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在AR眼镜坐标系下的坐标位置;
S82、根据AR眼镜坐标系与投影坐标系的坐标转换关系,将第二标识物在AR眼镜坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置。
另外,本发明还提供一种基于混合现实技术的牙齿根管口治疗辅助导航的***,该***用于执行上述的方法,如图6所示,该***包括处理器以及AR眼镜;
分别在患者牙齿和操作器械上预装第一标识物和第二标识物;
所述处理器接收患者口腔内的CT影像数据,利用CT影像数据制作患者牙齿的AR显示模型,并基于AI深度学习算法和图像识别算法对AR显示模型进行识别,获取牙齿根管口的根管形状和位置,并在AR显示模型上用颜色标记;
利用所述AR眼镜上的双目相机分别对第一标识物和第二标识物进行扫描,获取第一标识物图像和第二标识物图像;
所述处理器分别对第一标识物图像和第二标识物图像应用s l am算法,获取第一标识物和第二标识物在双目相机坐标系下的坐标位置;
所述处理器将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置后与AR显示模型中牙齿根管口标记点进行配准,获取牙齿根管口标记点在世界坐标系下的坐标位置,并将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置;
所述处理器将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置,并将第二标识物在投影坐标系下的坐标位置与牙齿根管口标记点在投影坐标系下的坐标位置匹配,获取第二标识物与牙齿根管口标记点在投影坐标系下的相对位置关系。
以上所述仅为发明的较佳实施例而已,并不用以限制发明,凡在发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在发明的保护范围之内。
Claims (7)
1.一种基于混合现实技术的牙齿根管口治疗辅助导航的方法,其特征在于,所述辅助导航方法包括:
在患者牙齿和操作器械上分别预装第一标识物和第二标识物;
获取患者口腔内的CT影像数据,并利用CT影像数据制作患者牙齿的AR显示模型;
基于AI深度学习算法和图像识别算法对AR显示模型进行识别,获取牙齿根管口的根管形状和位置,并在AR显示模型上用颜色进行标记;
利用AR眼镜上的双目相机分别对第一标识物和第二标识物进行扫描,获取第一标识物图像和第二标识物图像;
分别对第一标识物图像和第二标识物图像应用基于双目视觉slam算法,获取第一标识物和第二标识物在双目相机坐标系下的坐标位置;
将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置后与AR显示模型中牙齿根管口标记点进行配准,获取牙齿根管口标记点在世界坐标系下的坐标位置;
其中,所述将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置,包括:
根据双目相机坐标系与AR眼镜坐标系的转换关系,将第一标识物在双目相机坐标系下的坐标位置转换为第一标识物在AR眼镜坐标系下的坐标位置;
根据AR眼镜坐标系与世界坐标系的转换关系,将标志物在AR眼镜坐标系下的坐标位置转换为标志物在世界坐标系下的坐标位置;
将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置,包括:
根据AR眼镜坐标系与世界坐标系的转换关系,将牙齿根管标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在AR眼镜坐标系下的坐标位置;
根据AR眼镜坐标系与投影坐标系的转换关系,将牙齿根管标记点在AR眼镜坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置;
将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置,包括:
根据双目相机坐标系与AR眼镜坐标系的坐标转换关系,将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在AR眼镜坐标系下的坐标位置;
根据AR眼镜坐标系与投影坐标系的坐标转换关系,将第二标识物在AR眼镜坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置;
将第二标识物在投影坐标系下的坐标位置与牙齿根管口标记点在投影坐标系下的坐标位置进行匹配,获取第二标识物与牙齿根管口标记点的相对位置关系。
2.如权利要求1所述的基于混合现实技术的牙齿根管口治疗辅助导航的方法,其特征在于,所述利用CT影像数据制作患者牙齿的AR显示模型,包括:
通过三维可视化工具提取患者牙齿特征数据,并生成三角网格图;
将三角网格图转换为stl格式文件;
调取stl格式文件的内容制作患者牙齿的AR显示模型。
3.如权利要求1所述的基于混合现实技术的牙齿根管口治疗辅助导航的方法,其特征在于,所述相对位置关系包括方向、角度和距离。
4.如权利要求2所述的基于混合现实技术的牙齿根管口治疗辅助导航的方法,其特征在于,所述三维可视化工具至少包括MIMICS软件工具、Amira软件工具、Avizo软件工具以及ORS Visual软件工具中的一种。
5.如权利要求2所述的基于混合现实技术的牙齿根管口治疗辅助导航的方法,其特征在于,所述将三角网格图转换为stl格式文件通过ORS Visual软件工具进行格式转换。
6.如权利要求2所述的基于混合现实技术的牙齿根管口治疗辅助导航的方法及***,其特征在于,所述调取stl格式文件的内容制作患者牙齿的AR显示模型通过Unity实时内容开发平台调取stl格式文件的内容进行患者牙齿的AR显示模型制作。
7.一种基于混合现实技术的牙齿根管口治疗辅助导航的***,其特征在于,所述***用于执行权利要求1-6任意一项所述的方法,所述***包括处理器以及AR眼镜;
分别在患者牙齿和操作器械上预装第一标识物和第二标识物;
所述处理器接收患者口腔内的CT影像数据,利用CT影像数据制作患者牙齿的AR显示模型,并基于AI深度学习算法和图像识别算法对AR显示模型进行识别,获取牙齿根管口的根管形状和位置,并在AR显示模型上用颜色标记;
利用所述AR眼镜上的双目相机分别对第一标识物和第二标识物进行扫描,获取第一标识物图像和第二标识物图像;
所述处理器分别对第一标识物图像和第二标识物图像应用slam算法,获取第一标识物和第二标识物在双目相机坐标系下的坐标位置;
所述处理器将第一标识物在双目相机坐标系下的坐标位置转换为世界坐标系下的坐标位置后与AR显示模型中牙齿根管口标记点进行配准,获取牙齿根管口标记点在世界坐标系下的坐标位置,并将牙齿根管口标记点在世界坐标系下的坐标位置转换为牙齿根管口标记点在投影坐标系下的坐标位置;
所述处理器将第二标识物在双目相机坐标系下的坐标位置转换为第二标识物在投影坐标系下的坐标位置,并将第二标识物在投影坐标系下的坐标位置与牙齿根管口标记点在投影坐标系下的坐标位置匹配,获取第二标识物与牙齿根管口标记点在投影坐标系下的相对位置关系。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210115261.2A CN114587650B (zh) | 2022-02-06 | 2022-02-06 | 一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210115261.2A CN114587650B (zh) | 2022-02-06 | 2022-02-06 | 一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114587650A CN114587650A (zh) | 2022-06-07 |
CN114587650B true CN114587650B (zh) | 2024-06-11 |
Family
ID=81806175
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210115261.2A Active CN114587650B (zh) | 2022-02-06 | 2022-02-06 | 一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114587650B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117731439A (zh) * | 2023-12-28 | 2024-03-22 | 中国人民解放军联勤保障部队第九〇四医院 | 一种口腔种植定位方法和*** |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013034764A (ja) * | 2011-08-10 | 2013-02-21 | Akira Takebayashi | サージカルガイド装置及びドリルの位置決め方法 |
CN106037964A (zh) * | 2016-08-16 | 2016-10-26 | 苏州迪凯尔医疗科技有限公司 | 基于印模材料的医学图像配准方法 |
US9495783B1 (en) * | 2012-07-25 | 2016-11-15 | Sri International | Augmented reality vision system for tracking and geolocating objects of interest |
KR20170091847A (ko) * | 2016-02-02 | 2017-08-10 | 김도현 | 임플란트 수술 가이드 방법 |
CN107374729A (zh) * | 2017-08-21 | 2017-11-24 | 上海霖晏医疗科技有限公司 | 基于ar技术的手术导航***及方法 |
WO2018032083A1 (en) * | 2016-08-17 | 2018-02-22 | Synaptive Medical (Barbados) Inc. | Methods and systems for registration of virtual space with real space in an augmented reality system |
CN108742898A (zh) * | 2018-06-12 | 2018-11-06 | 中国人民解放军总医院 | 基于混合现实的口腔种植导航*** |
CN109674532A (zh) * | 2019-01-25 | 2019-04-26 | 上海交通大学医学院附属第九人民医院 | 基于mr的手术导航***及其设备、方法和存储介质 |
CN110353806A (zh) * | 2019-06-18 | 2019-10-22 | 北京航空航天大学 | 用于微创全膝关节置换手术的增强现实导航方法及*** |
TWI697317B (zh) * | 2019-08-30 | 2020-07-01 | 國立中央大學 | 應用於與手術導航整合之混合實境系統之數位影像實境對位套件與方法 |
WO2020220208A1 (en) * | 2019-04-29 | 2020-11-05 | Shanghai United Imaging Healthcare Co., Ltd. | Systems and methods for object positioning and image-guided surgery |
CN112168392A (zh) * | 2020-10-21 | 2021-01-05 | 雅客智慧(北京)科技有限公司 | 牙科导航手术配准方法及*** |
CN113693723A (zh) * | 2021-08-05 | 2021-11-26 | 北京大学 | 一种面向口腔咽喉部手术的跨模态导航定位***及方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10888399B2 (en) * | 2016-12-16 | 2021-01-12 | Align Technology, Inc. | Augmented reality enhancements for dental practitioners |
US11288877B2 (en) * | 2020-01-10 | 2022-03-29 | 38th Research Institute, China Electronics Technology Group Corp. | Method for matching a virtual scene of a remote scene with a real scene for augmented reality and mixed reality |
-
2022
- 2022-02-06 CN CN202210115261.2A patent/CN114587650B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013034764A (ja) * | 2011-08-10 | 2013-02-21 | Akira Takebayashi | サージカルガイド装置及びドリルの位置決め方法 |
US9495783B1 (en) * | 2012-07-25 | 2016-11-15 | Sri International | Augmented reality vision system for tracking and geolocating objects of interest |
KR20170091847A (ko) * | 2016-02-02 | 2017-08-10 | 김도현 | 임플란트 수술 가이드 방법 |
CN106037964A (zh) * | 2016-08-16 | 2016-10-26 | 苏州迪凯尔医疗科技有限公司 | 基于印模材料的医学图像配准方法 |
WO2018032083A1 (en) * | 2016-08-17 | 2018-02-22 | Synaptive Medical (Barbados) Inc. | Methods and systems for registration of virtual space with real space in an augmented reality system |
CN107374729A (zh) * | 2017-08-21 | 2017-11-24 | 上海霖晏医疗科技有限公司 | 基于ar技术的手术导航***及方法 |
CN108742898A (zh) * | 2018-06-12 | 2018-11-06 | 中国人民解放军总医院 | 基于混合现实的口腔种植导航*** |
CN109674532A (zh) * | 2019-01-25 | 2019-04-26 | 上海交通大学医学院附属第九人民医院 | 基于mr的手术导航***及其设备、方法和存储介质 |
WO2020220208A1 (en) * | 2019-04-29 | 2020-11-05 | Shanghai United Imaging Healthcare Co., Ltd. | Systems and methods for object positioning and image-guided surgery |
CN110353806A (zh) * | 2019-06-18 | 2019-10-22 | 北京航空航天大学 | 用于微创全膝关节置换手术的增强现实导航方法及*** |
TWI697317B (zh) * | 2019-08-30 | 2020-07-01 | 國立中央大學 | 應用於與手術導航整合之混合實境系統之數位影像實境對位套件與方法 |
CN112168392A (zh) * | 2020-10-21 | 2021-01-05 | 雅客智慧(北京)科技有限公司 | 牙科导航手术配准方法及*** |
CN113693723A (zh) * | 2021-08-05 | 2021-11-26 | 北京大学 | 一种面向口腔咽喉部手术的跨模态导航定位***及方法 |
Also Published As
Publication number | Publication date |
---|---|
CN114587650A (zh) | 2022-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11690517B2 (en) | Systems for creating and interacting with three dimensional virtual models | |
US11636943B2 (en) | Method for manipulating a dental virtual model, method for creating physical entities based on a dental virtual model thus manipulated, and dental models thus created | |
US20070160957A1 (en) | Image based dentition record digitization | |
US8457772B2 (en) | Method for planning a dental component | |
CN106037964B (zh) | 基于印模材料的医学图像配准方法 | |
US20100291505A1 (en) | Haptically Enabled Coterminous Production of Prosthetics and Patient Preparations in Medical and Dental Applications | |
WO2006065955A2 (en) | Image based orthodontic treatment methods | |
JP2015502209A (ja) | 歯科調製ガイド | |
KR20080048562A (ko) | 3차원 역공학 기술을 이용한 치아 이동 자동측정 방법 | |
CN106570859B (zh) | 一种牙齿图像分析*** | |
EP4144324A1 (en) | Intelligent design method for digital model for oral digital impression instrument | |
CN113052902B (zh) | 牙齿治疗监测方法 | |
CN112885436B (zh) | 一种基于增强现实三维成像的牙科手术实时辅助*** | |
KR101877895B1 (ko) | 임플란트 진단용 영상 생성 시스템 및 그 생성방법 | |
CN108776996B (zh) | 一种高效自动辅助寻找牙齿咬合深度的方法 | |
CN110811653A (zh) | 一种测量正畸过程中牙齿三维移动的方法 | |
CN114587650B (zh) | 一种基于混合现实技术的牙齿根管口治疗辅助导航的方法及*** | |
CN112419476A (zh) | 牙科病人三维虚拟图像的创建方法及*** | |
CN108852540A (zh) | 用于获取口内数字化印模的***和方法 | |
CN114399551B (zh) | 一种基于混合现实技术定位牙齿根管口的方法及*** | |
CN110742704B (zh) | 根管精准定位的嵌入式导板及其制备方法、制备***、应用、根管精准定位方法 | |
CN117745795A (zh) | 一种针对牙槽骨的cbct影像处理和测量方法 | |
CN115830287B (zh) | 基于激光口扫与cbct重建的牙齿点云融合方法、设备及介质 | |
KR102000242B1 (ko) | 무치악 영역에 가상 보철물을 디자인하는 방법 | |
CN108992193B (zh) | 一种牙齿修复辅助设计方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |