CN113813053A - 一种基于腹腔镜内窥影像的手术进程分析方法 - Google Patents
一种基于腹腔镜内窥影像的手术进程分析方法 Download PDFInfo
- Publication number
- CN113813053A CN113813053A CN202111097230.0A CN202111097230A CN113813053A CN 113813053 A CN113813053 A CN 113813053A CN 202111097230 A CN202111097230 A CN 202111097230A CN 113813053 A CN113813053 A CN 113813053A
- Authority
- CN
- China
- Prior art keywords
- data set
- network
- laparoscope
- surgical
- video content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000004458 analytical method Methods 0.000 title claims abstract description 12
- 238000000605 extraction Methods 0.000 claims description 10
- 238000013528 artificial neural network Methods 0.000 claims description 8
- 238000005520 cutting process Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 claims description 6
- 210000000232 gallbladder Anatomy 0.000 claims description 6
- 238000002357 laparoscopic surgery Methods 0.000 claims description 6
- 238000001356 surgical procedure Methods 0.000 claims description 6
- 238000007781 pre-processing Methods 0.000 claims description 5
- 238000004806 packaging method and process Methods 0.000 claims description 3
- 238000004140 cleaning Methods 0.000 claims description 2
- 238000010008 shearing Methods 0.000 claims description 2
- 238000012545 processing Methods 0.000 abstract description 3
- 238000013135 deep learning Methods 0.000 abstract description 2
- 230000002950 deficient Effects 0.000 abstract description 2
- 238000003062 neural network model Methods 0.000 abstract description 2
- 238000002324 minimally invasive surgery Methods 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000002560 therapeutic procedure Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/361—Image-producing devices, e.g. surgical cameras
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/044—Recurrent networks, e.g. Hopfield networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/048—Activation functions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- General Physics & Mathematics (AREA)
- Surgery (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Biophysics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Pathology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Gynecology & Obstetrics (AREA)
- Radiology & Medical Imaging (AREA)
- Endoscopes (AREA)
Abstract
一种腹腔镜内窥影像的手术进程分析方法涉及医学图像处理领域,实现了整个神经网络模型的鲁棒性。本发明所提算法借助标定好的阶段数据集,利用深度学习对具有难以识别的视频帧的数据集进行有效的特征提取,更好地利用具有缺陷的数据集,并提高模型的鲁棒性。同时提出一种术中场景的当前帧特征信息与之前帧识别结果联合的方式,使阶段识别精度更高,有效、准确地进行手术进程分析。
Description
技术领域
本专利属于医学图像处理领域,具体涉及一种基于腹腔镜内窥影像的手术进程分析方法。
背景技术
腹腔镜手术是一门新发展起来的微创方法,许多过去的开放性手术现在已被腔内手术取而代之,增加了患者的治疗机会。在腹腔镜手术中,医生采用腹腔镜作为内外部沟通的桥梁。腹腔镜手术的开展,减轻了病人开刀的痛楚,同时使病人的恢复期缩短,并且相对降低了患者的支出费用。
然而在应用中,医生仅借助微小创面观察内部情况,但是由于内部情况十分复杂,往往需要计算机辅助医生来提高对手术术野的理解。要增强微创手术的效果,就需要精通手术过程的医生,另一方面,可以借助于计算机辅助治疗来完成医生对内窥镜场景的理解。随着机器人辅助微创手术的发展,增强手术过程的自动情境意识对于提高外科医生的表现和患者安全变得至关重要。手术器械的检测和手术阶段识别的对于各种其他任务(包括工具姿态估计,跟踪和控制)也起着至关重要的作用。
针对上述问题,Twinanda等人提出的EndoNet联合从视频中进行手术工具和阶段识别,利用神经网络和分层HMM获得时间平滑的阶段预测。随着RNN的兴起,EndoNet被演化为EndoLSTM,其训练过程分为两步,包括卷积神经网络(CNN)作为特征提取器和LSTM进行特征细化。Lea等人初次将时间卷积引入到分层处理视频的动作分割中,与RNNs相比,编码器-解码器架构能够同时捕获高阶和低阶特征。后来,Oord等人使TCNs适应了扩张卷积,用于动作定位,并由于更大的接受域而有着更高的时间分辨率,进而实现了性能的改进。Farha等人将多阶段TCNs(MS-TCNs)引入到动作分割中,这个多阶段的网络由堆叠的预测器阶段组成,每个阶段包括一个单独的多层TCN,它逐步完善了前几个阶段的初始预测。Tobias首次在工作流分析中提出了一种多阶段时间卷积网络,用于手术阶段识别的分层预测优化,一定程度上提升了在线实时识别的准确性及稳定性。总体来看,研究者们采用不同的方法对阶段识别模型进行了改进和提升,丰富了对手术阶段自动识别算法的研究。然而,较少有人考虑整个模型的鲁棒性,如模型对手术视频图片中血污、光照等造成的图片模糊情况的识别能力,以及更深层的网络对手术进程的隐含意义。
发明内容
为了解决现有技术中存在的问题,本发明提供了一种基于腹腔镜内窥影像的手术进程分析方法,实现了整个神经网络模型的鲁棒性。
本发明解决技术问题所采用的技术方案如下:
一种基于腹腔镜内窥影像的手术进程分析方法,该方法包括如下步骤:
步骤一:采集腹腔镜术野视频内容,对所述视频内容划分并进行预处理;
步骤二:对基于Cholec80数据集以及MICCAI2015数据集,注意力机制ResNeXt网络的神经网络进行学习,将注意力机制模块SEBlock拼接在ResNeXt101网络的每个残差模块ResBlock之后;
步骤三:将步骤一中预处理过的视频内容输入到步骤二中已经学习好的神经网络中,提取实时腹腔镜的视频帧中的特征,与步骤二中Cholec80数据集以及MICCAI2015数据集内的特征进行融合,参考多种特征提取及阶段识别算法,采用OHFM网络识别手术阶段位于步骤一中的类别,分析当前手术阶段。
优选的,所述步骤一中影像内容分为:准备、三角切割、剪切、胆囊切割、胆囊包装、清理和胆囊回收。
优选的,所述步骤一中的预处理为调整所述影像内容的分辨率和帧速流。
优选的,所述步骤二中将交叉熵损失函数作为特征提取的损失函数。
优选的,所述OHFM网络为多个LSTM网络串联。
本发明的有益效果是:本发明所提算法借助标定好的阶段数据集,利用深度学习对具有难以识别的视频帧的数据集进行有效的特征提取,更好地利用具有缺陷的数据集,并提高模型的鲁棒性。同时提出一种术中场景的当前帧特征信息与之前帧识别结果联合的方式,使阶段识别精度更高,有效、准确地进行手术进程分析。
附图说明
图1本发明一种基于腹腔镜内窥影像的手术进程分析方法的流程示意图。
图2用于特征提取的基于组卷积的ResNeXt网络结构图。
图3改进的ResNeXt网络结构图。
具体实施方式
下面结合附图和实施例对本发明做进一步详细说明。
如图1所示,本发明提出一种基于腹腔镜内窥影像的手术进程分析方法,是一种分析手术进程的神经网络设计方法,
该方法包括如下步骤:
步骤一:采集腹腔镜术野视频内容,对所述视频内容划分并进行预处理
腹腔镜的术野视频中包含多种信息,包括手术器械的种类、位置、轮廓和患者体内器官等信息,这些信息与手术进程的联系非常密切。首先探究术野视频内容中包含的可以利用的用于手术进程分析的内容,以及对手术的各个进程进行划分。
根据采用的手术数据集将手术进程分成Preparation(准备)、Calot TriangleDissection(三角切割)、Clipping Cutting(剪切)、Gallbladder Dissection(胆囊切割)、Gallbladder Packaging(胆囊包装)、Cleaning Coagulation(清理)、GallbladderRetraction(胆囊回收)。
对实时的腹腔镜视频进行预处理,输入图像大小调整为256*256像素,视频帧固定为25FPS,以适应模型的处理速度。
步骤二:对基于Cholec80数据集以及MICCAI2015数据集,注意力机制ResNeXt网络的神经网络进行学习,将注意力机制模块SEBlock拼接在ResNeXt101网络的每个残差模块ResBlock之后;将交叉熵损失函数作为特征提取的损失函数。
针对手术数据集中的术野特征信息不完备情况,对场景内的特征进行提取。即采用带有手术阶段的Cholec80数据集以及MICCAI2015数据集,以上数据集包括手术视频及手术视频中每一帧的手术阶段。采用基于注意力机制的ResNeXt网络,如图2所示,加入了注意力机制模块SEBlock的网络结构见图3。
步骤三:将步骤一中预处理过的视频内容输入到步骤二中已经学习好的神经网络中,提取实时腹腔镜的视频帧中的特征,与步骤二中Cholec80数据集以及MICCAI2015数据集内的特征进行融合,参考多种特征提取及阶段识别算法,采用OHFM网络识别手术阶段位于步骤一中的类别,分析当前手术阶段。
此阶段主要对整个视频场景特征信息和检测出来的之前帧的手术阶段信息进行有效融合。步骤二中已经提取实时腹腔镜的视频帧中的特征,即当前帧此阶段在处理某一帧图片时,将ResNeXt网络提取出的特征信息和之前帧的阶段标签联合组成网络的输入,识别现在的手术阶段。参考多种特征提取及阶段识别算法,采用OHFM网络(多个LSTM网络串联)分析当前手术阶段。整体网络结构见图1。最终结果表明,带有注意力机制的、层数更深的网络对于腹腔镜的手术场景的特征提取及手术阶段识别有着良好的效果。
以上,仅为本发明的较佳实施例,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应该涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求所界定的保护范围为准。
Claims (5)
1.一种基于腹腔镜内窥影像的手术进程分析方法,其特征在于,该方法包括如下步骤:
步骤一:采集腹腔镜术野视频内容,对所述视频内容划分并进行预处理;
步骤二:对基于Cholec80数据集以及MICCAI2015数据集,注意力机制ResNeXt网络的神经网络进行学习,将注意力机制模块SEBlock拼接在ResNeXt101网络的每个残差模块ResBlock之后;
步骤三:将步骤一中预处理过的视频内容输入到步骤二中已经学习好的神经网络中,提取实时腹腔镜的视频帧中的特征,与步骤二中Cholec80数据集以及MICCAI2015数据集内的特征进行融合,参考多种特征提取及阶段识别算法,采用OHFM网络识别手术阶段位于步骤一中的类别,分析当前手术阶段。
2.根据权利要求1所述的一种基于腹腔镜内窥影像的手术进程分析方法,其特征在于,所述步骤一中影像内容划分为:准备、三角切割、剪切、胆囊切割、胆囊包装、清理和胆囊回收。
3.根据权利要求1所述的一种基于腹腔镜内窥影像的手术进程分析方法,其特征在于,所述步骤一中的预处理为调整所述影像内容的分辨率和帧速流。
4.根据权利要求1所述的一种基于腹腔镜内窥影像的手术进程分析方法,其特征在于,所述步骤二中将交叉熵损失函数作为特征提取的损失函数。
5.根据权利要求1所述的一种基于腹腔镜内窥影像的手术进程分析方法,其特征在于,所述OHFM网络为多个LSTM网络串联。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111097230.0A CN113813053A (zh) | 2021-09-18 | 2021-09-18 | 一种基于腹腔镜内窥影像的手术进程分析方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111097230.0A CN113813053A (zh) | 2021-09-18 | 2021-09-18 | 一种基于腹腔镜内窥影像的手术进程分析方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113813053A true CN113813053A (zh) | 2021-12-21 |
Family
ID=78914829
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111097230.0A Pending CN113813053A (zh) | 2021-09-18 | 2021-09-18 | 一种基于腹腔镜内窥影像的手术进程分析方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113813053A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114145844A (zh) * | 2022-02-10 | 2022-03-08 | 北京数智元宇人工智能科技有限公司 | 一种基于深度学习算法的腹腔镜手术人工智能云辅助*** |
CN114372962A (zh) * | 2021-12-27 | 2022-04-19 | 华南理工大学 | 基于双粒度时间卷积的腹腔镜手术阶段识别方法与*** |
CN115187596A (zh) * | 2022-09-09 | 2022-10-14 | 中国医学科学院北京协和医院 | 用于腹腔镜结直肠癌手术的神经智能辅助识别*** |
Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108197606A (zh) * | 2018-01-31 | 2018-06-22 | 浙江大学 | 一种基于多尺度膨胀卷积的病理切片中异常细胞的识别方法 |
CN108537135A (zh) * | 2018-03-16 | 2018-09-14 | 北京市商汤科技开发有限公司 | 对象识别及对象识别网络的训练方法和装置、电子设备 |
CN108710830A (zh) * | 2018-04-20 | 2018-10-26 | 浙江工商大学 | 一种结合密集连接注意力金字塔残差网络和等距限制的人体3d姿势估计方法 |
CN109559799A (zh) * | 2018-10-12 | 2019-04-02 | 华南理工大学 | 医学图像语义描述方法、描述模型的构建方法及该模型 |
CN109886346A (zh) * | 2019-02-26 | 2019-06-14 | 四川大学华西医院 | 一种心肌mri图像分类*** |
KR20190100011A (ko) * | 2018-02-20 | 2019-08-28 | (주)휴톰 | 수술영상을 이용한 수술정보 제공 방법 및 장치 |
CN110889853A (zh) * | 2018-09-07 | 2020-03-17 | 天津大学 | 基于残差-注意力深度神经网络的肿瘤分割方法 |
CN111368754A (zh) * | 2020-03-08 | 2020-07-03 | 北京工业大学 | 一种基于全局上下文信息的机场跑道异物检测方法 |
US10755413B1 (en) * | 2020-02-24 | 2020-08-25 | Qure.Ai Technologies Private Limited | Method and system for medical imaging evaluation |
CN111783520A (zh) * | 2020-05-18 | 2020-10-16 | 北京理工大学 | 基于双流网络的腹腔镜手术阶段自动识别方法及装置 |
CN112085717A (zh) * | 2020-09-04 | 2020-12-15 | 厦门大学 | 一种用于腹腔镜手术的视频预测方法及其*** |
CN112085760A (zh) * | 2020-09-04 | 2020-12-15 | 厦门大学 | 一种腹腔镜手术视频的前景分割方法 |
CN112101428A (zh) * | 2020-08-27 | 2020-12-18 | 上海交通大学 | 一种基于卷积神经网络的图像分类方法及*** |
CN112396621A (zh) * | 2020-11-19 | 2021-02-23 | 之江实验室 | 基于深度学习的高分辨率显微内窥镜图像细胞核分割方法 |
CN112785592A (zh) * | 2021-03-10 | 2021-05-11 | 河北工业大学 | 基于多重扩张路径的医学影像深度分割网络 |
CN112932663A (zh) * | 2021-03-02 | 2021-06-11 | 成都与睿创新科技有限公司 | 一种提高腹腔镜胆囊切除术安全性的智能辅助方法及*** |
US20210192220A1 (en) * | 2018-12-14 | 2021-06-24 | Tencent Technology (Shenzhen) Company Limited | Video classification method and apparatus, computer device, and storage medium |
CN113066026A (zh) * | 2021-03-26 | 2021-07-02 | 重庆邮电大学 | 基于深度神经网络的内窥镜图像烟雾净化方法 |
CN113096086A (zh) * | 2021-04-01 | 2021-07-09 | 中南大学 | 一种ki67指数确定方法及*** |
CN113344927A (zh) * | 2021-08-05 | 2021-09-03 | 武汉楚精灵医疗科技有限公司 | 基于深度学习的图像识别方法、装置、服务器及存储介质 |
-
2021
- 2021-09-18 CN CN202111097230.0A patent/CN113813053A/zh active Pending
Patent Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108197606A (zh) * | 2018-01-31 | 2018-06-22 | 浙江大学 | 一种基于多尺度膨胀卷积的病理切片中异常细胞的识别方法 |
KR20190100011A (ko) * | 2018-02-20 | 2019-08-28 | (주)휴톰 | 수술영상을 이용한 수술정보 제공 방법 및 장치 |
CN108537135A (zh) * | 2018-03-16 | 2018-09-14 | 北京市商汤科技开发有限公司 | 对象识别及对象识别网络的训练方法和装置、电子设备 |
CN108710830A (zh) * | 2018-04-20 | 2018-10-26 | 浙江工商大学 | 一种结合密集连接注意力金字塔残差网络和等距限制的人体3d姿势估计方法 |
CN110889853A (zh) * | 2018-09-07 | 2020-03-17 | 天津大学 | 基于残差-注意力深度神经网络的肿瘤分割方法 |
CN109559799A (zh) * | 2018-10-12 | 2019-04-02 | 华南理工大学 | 医学图像语义描述方法、描述模型的构建方法及该模型 |
US20210192220A1 (en) * | 2018-12-14 | 2021-06-24 | Tencent Technology (Shenzhen) Company Limited | Video classification method and apparatus, computer device, and storage medium |
CN109886346A (zh) * | 2019-02-26 | 2019-06-14 | 四川大学华西医院 | 一种心肌mri图像分类*** |
US10755413B1 (en) * | 2020-02-24 | 2020-08-25 | Qure.Ai Technologies Private Limited | Method and system for medical imaging evaluation |
CN111368754A (zh) * | 2020-03-08 | 2020-07-03 | 北京工业大学 | 一种基于全局上下文信息的机场跑道异物检测方法 |
CN111783520A (zh) * | 2020-05-18 | 2020-10-16 | 北京理工大学 | 基于双流网络的腹腔镜手术阶段自动识别方法及装置 |
CN112101428A (zh) * | 2020-08-27 | 2020-12-18 | 上海交通大学 | 一种基于卷积神经网络的图像分类方法及*** |
CN112085717A (zh) * | 2020-09-04 | 2020-12-15 | 厦门大学 | 一种用于腹腔镜手术的视频预测方法及其*** |
CN112085760A (zh) * | 2020-09-04 | 2020-12-15 | 厦门大学 | 一种腹腔镜手术视频的前景分割方法 |
CN112396621A (zh) * | 2020-11-19 | 2021-02-23 | 之江实验室 | 基于深度学习的高分辨率显微内窥镜图像细胞核分割方法 |
CN112932663A (zh) * | 2021-03-02 | 2021-06-11 | 成都与睿创新科技有限公司 | 一种提高腹腔镜胆囊切除术安全性的智能辅助方法及*** |
CN112785592A (zh) * | 2021-03-10 | 2021-05-11 | 河北工业大学 | 基于多重扩张路径的医学影像深度分割网络 |
CN113066026A (zh) * | 2021-03-26 | 2021-07-02 | 重庆邮电大学 | 基于深度神经网络的内窥镜图像烟雾净化方法 |
CN113096086A (zh) * | 2021-04-01 | 2021-07-09 | 中南大学 | 一种ki67指数确定方法及*** |
CN113344927A (zh) * | 2021-08-05 | 2021-09-03 | 武汉楚精灵医疗科技有限公司 | 基于深度学习的图像识别方法、装置、服务器及存储介质 |
Non-Patent Citations (2)
Title |
---|
祁宝莲等: "基于卷积神经网络的半监督手术视频流程识别", 《计算机科学》 * |
祁宝莲等: "基于卷积神经网络的半监督手术视频流程识别", 《计算机科学》, 15 June 2020 (2020-06-15) * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114372962A (zh) * | 2021-12-27 | 2022-04-19 | 华南理工大学 | 基于双粒度时间卷积的腹腔镜手术阶段识别方法与*** |
CN114145844A (zh) * | 2022-02-10 | 2022-03-08 | 北京数智元宇人工智能科技有限公司 | 一种基于深度学习算法的腹腔镜手术人工智能云辅助*** |
CN115187596A (zh) * | 2022-09-09 | 2022-10-14 | 中国医学科学院北京协和医院 | 用于腹腔镜结直肠癌手术的神经智能辅助识别*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102013806B1 (ko) | 인공데이터 생성 방법 및 장치 | |
CN113813053A (zh) | 一种基于腹腔镜内窥影像的手术进程分析方法 | |
Münzer et al. | Content-based processing and analysis of endoscopic images and videos: A survey | |
Shvets et al. | Automatic instrument segmentation in robot-assisted surgery using deep learning | |
CN111383214B (zh) | 实时内窥镜肠镜息肉检测*** | |
Zhang et al. | Surgical tools detection based on modulated anchoring network in laparoscopic videos | |
Blum et al. | Modeling and online recognition of surgical phases using hidden markov models | |
CN112614571B (zh) | 神经网络模型的训练方法、装置、图像分类方法和介质 | |
CN113763386B (zh) | 基于多尺度特征融合的手术器械图像智能分割方法和*** | |
CN114841320A (zh) | 一种基于喉镜医学影像的器官自动分割方法 | |
US20240156547A1 (en) | Generating augmented visualizations of surgical sites using semantic surgical representations | |
Li et al. | SE-OHFM: A surgical phase recognition network with SE attention module | |
Kurian et al. | Deep learning based surgical workflow recognition from laparoscopic videos | |
Rueckert et al. | Methods and datasets for segmentation of minimally invasive surgical instruments in endoscopic images and videos: A review of the state of the art | |
EP4216861A1 (en) | Systems and methods for predicting and preventing bleeding and other adverse events | |
Alapatt et al. | Temporally Constrained Neural Networks (TCNN): A framework for semi-supervised video semantic segmentation | |
Xia et al. | A nested u-structure for instrument segmentation in robotic surgery | |
CN116188486A (zh) | 一种面向腹腔镜肝脏手术的视频分割方法及*** | |
Lahane et al. | Detection of unsafe action from laparoscopic cholecystectomy video | |
KR102619729B1 (ko) | 임상 기록 데이터 생성 방법 및 장치 | |
CN116863469B (zh) | 一种基于深度学习的手术解剖部位识别标注方法 | |
Jin | Development of endoscopic SLAM and the challenges | |
CN117338378B (zh) | 铰接式腹腔镜钳及基于sbb u-net的腹腔图像快速分割方法 | |
Qin | Autonomous Temporal Understanding and State Estimation during Robot-Assisted Surgery | |
CN115546230A (zh) | 基于Xformer类算法的腹腔镜图像分割方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211221 |