CN110974306B - 一种超声内镜下识别和定位胰腺神经内分泌肿瘤的*** - Google Patents

一种超声内镜下识别和定位胰腺神经内分泌肿瘤的*** Download PDF

Info

Publication number
CN110974306B
CN110974306B CN201911301799.7A CN201911301799A CN110974306B CN 110974306 B CN110974306 B CN 110974306B CN 201911301799 A CN201911301799 A CN 201911301799A CN 110974306 B CN110974306 B CN 110974306B
Authority
CN
China
Prior art keywords
image
neuroendocrine tumor
pancreatic neuroendocrine
color band
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911301799.7A
Other languages
English (en)
Other versions
CN110974306A (zh
Inventor
李�真
戚庆庆
冯健
左秀丽
李延青
杨晓云
邵学军
季锐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Medcare Digital Engineering Co ltd
Qilu Hospital of Shandong University
Original Assignee
Qingdao Medcare Digital Engineering Co ltd
Qilu Hospital of Shandong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Medcare Digital Engineering Co ltd, Qilu Hospital of Shandong University filed Critical Qingdao Medcare Digital Engineering Co ltd
Priority to CN201911301799.7A priority Critical patent/CN110974306B/zh
Publication of CN110974306A publication Critical patent/CN110974306A/zh
Application granted granted Critical
Publication of CN110974306B publication Critical patent/CN110974306B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/12Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5223Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Endoscopes (AREA)

Abstract

本发明公开了一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,包括:图像采集模块,训练集制作模块,被配置为使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;辅助诊断模块,被配置为构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;联合判断模块,被配置为将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性。本发明通过对超声内镜下PNET的智能自动化识别,可在超声内镜检查过程中,在产生的大量超声内镜图片中准确识别及定位PNET,提高PNET的检出率,减少漏诊。

Description

一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***
技术领域
本发明涉及肿瘤智能辅助诊断技术领域,尤其涉及一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***。
背景技术
本部分的陈述仅仅是提供了与本发明相关的背景技术信息,不必然构成在先技术。
目前超声内镜下对胰腺神经内分泌肿瘤(PNET)的识别和定位仍依赖于超声内镜检查操作者,在超声内镜扫查过程中,操作者依赖个人的经验,在超声图像中识别并定位PNET。但是,由于PNET病变的超声内镜图像与正常胰腺背景的图像具有非常高的相似度,而在超声内镜连续扫查的过程中会有大量的超声内镜图片,在检查过程中对PNET进行识别和定位具有较高的难度,需要检查者有丰富的超声内镜识图经验,且存在一定程度的误诊和漏诊。
发明内容
为了解决上述问题,本发明提出了一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,能够在检查过程中迅速、准确地对PNET进行识别和定位。
在一些实施方式中,采用如下技术方案:
一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,包括:
图像采集模块,通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有PNET病变的内镜图像构建样本集;
训练集制作模块,被配置为使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
辅助诊断模块,被配置为构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;
联合判断模块,被配置为将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性。
进一步地,将输出结果以色带图的形式进行显示,具体为:
(1)设置色带图的初始值;
(2)判断当前帧图像PNET输出概率是否大于设定值;如果是,与当前图像对应的色带值增加当前概率值;当PNET输出概率小于设定值时,与当前图像对应的色带值减去设定值与当前输出概率的差值;
(3)重复步骤(2),直到所有的图像判断完毕,按照图像输入顺序将每一帧图像的色带值依次连接得到最终的色带图;
(4)通过色带图的颜色变化,判断当前辅助诊断模型输出结果的可信度。
在另一些实施方式中,采用如下技术方案:
一种终端设备,其包括处理器和计算机可读存储介质,处理器用于实现各指令;计算机可读存储介质用于存储多条指令,所述指令适于由处理器加载并执行以下过程:
通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有PNET病变的内镜图像构建样本集;
使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;
将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性。
在另一些实施方式中,采用如下技术方案:
一种计算机可读存储介质,其中存储有多条指令,所述指令适于由终端设备的处理器加载并执行以下过程:
通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有PNET病变的内镜图像构建样本集;
使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;
将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性。
与现有技术相比,本发明的有益效果是:
本发明通过观察色带图的颜色变化是否一致,可以直观的判断当前输出结果的确信度;有利于提升诊断结果的可靠性。
通过对超声内镜下PNET的智能自动化识别,可在超声内镜检查过程中,在产生的大量超声内镜图片中准确识别及定位PNET,提高PNET的检出率,减少漏诊。
附图说明
图1为本发明超声内镜下识别和定位胰腺神经内分泌肿瘤的***工作过程示意图。
具体实施方式
应该指出,以下详细说明都是例示性的,旨在对本申请提供进一步的说明。除非另有指明,本发明使用的所有技术和科学术语具有与本申请所属技术领域的普通技术人员通常理解的相同含义。
需要注意的是,这里所使用的术语仅是为了描述具体实施方式,而非意图限制根据本申请的示例性实施方式。如在这里所使用的,除非上下文另外明确指出,否则单数形式也意图包括复数形式,此外,还应当理解的是,当在本说明书中使用术语“包含”和/或“包括”时,其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
实施例一
在一个或多个实施例中,公开了一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,包括:
图像采集模块,通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;通过人工选取单帧带有PNET病变的内镜图像构建样本集;
图像预处理模块,被配置为对采集到的图像信息进行预处理;
由于带有PNET病变的图像是在临床中超声内镜下单张采集的,需要去除图片中的患者隐私数据。为减少计算量还需要去除黑色边框,只保留彩色消化道区域。
通过黑边算法处理,缩放处理和归一化处理,将其每一帧图像经过去黑边算法后去掉内镜图像多余的边界仅保留ROI区域,采用双三次插值缩放算法将所有图像分辨率均调整416X416分辨率大小。
训练集制作模块,被配置为使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
使用目标检测深度学习技术进行PNET识别,需要对图像进行特征区域标注,对病症区域进行画框记录下区域定点坐标。本实施例使用的是Yolo目标检测模型,无PNET的超声内镜图无需标注。
具体的标注方法为:
观察每一张图像的PNET特征区域,通过标注工具在图片上画矩形框,画矩形框时以病灶区域的外截矩形为中心区域,画一个矩形,这个矩形要完全包含病灶的外截矩形,上下左右距离病灶外截矩形10个像素左右。
辅助诊断模块,被配置为构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;
本实施例中,辅助诊断模型可以采用YOLO v3神经网络模型,具有较高的检测准确度且检测速度快的特点,可以满足消化内镜实时检查的需求。
为了更好的达到训练效果,我们使用动态学习率,公式为:
learning_rate=base_lr*(1-epoch/train_epoch)*2;
其中,learning_rate为当前学习率,base_lr为初始学习率,epoch为当前迭代次数,train_epoch训练总迭代次数。
为避免过拟合,实时观察损失函数下降情况,当损失函数波动不大后,及时停止训练。
模型训练的效果是通过损失函数评估的。训练的目的是找到损失函数的最小值。找最小值使用了梯度下降。学习率就是每个批次参数调整幅度的大小。一个动态学习率可以加快训练速度。训练开始的时候,学习率数值比较大,参数每个批次调整的幅度大,可以使得损失函数更快下降。当要到达损失函数最小值时,如果调整幅度太大,可能就越过了最低点,导致损失函数上升了,这样就会在最小值点左右震荡,找不到最小的点,因此要动态减小学习率。
在另一些实施方式中,辅助诊断模型的工作过程具体为:
第一阶段通过缩小后的完整图片预测注意力图和粗边界框,以获得图片中胰腺神经内分泌肿瘤的位置和粗略尺寸,这种降采样方式利于减少推理时间和便于上下文信息获取。
具体地,将原始图片缩小为长边为255的图片,在沙漏网络的上采样层预测3个注意力图,分别用于小(小于32)中(32-96之间)、大(大于96)PNET特征区域的预测,预测不同大小尺寸便于后面裁剪的时候控制尺寸,训练时使用α=2的focal loss,设置GroundTruth Bounding Box的中点为positive,其余为负样本,测试时大于阈值t=0.3的才会生成PNET特征区域的中心位置。
利用从缩小后的完整图片中得到的位置来确定哪里需要进行处理。如果直接从缩小后的图片中裁剪,则一些PNET特征区域可能会太小以至于无法准确的进行检测。因此,需要刚开始就在高分辨率的特征图上得到尺寸信息。
从注意力图获取到中心位置(粗略),可以根据大致的PNET特征区域尺寸选择放大倍数(小目标放大更多),在每个可能中心位置(x,y),放大设定倍数,最后将此时的图像映射回原图,以(x,y)为中心点取255×255大小为裁剪区域。
从预测的边界框中得到的位置包含更多PNET特征区域的尺寸信息。可以利用得到的边界框的尺寸来确定缩放大小。
最终的检测框通过角点检测机制生成,最后通过预测裁剪区域的角点热图,嵌入和偏移,最后将坐标映射回原图。
最后采用Soft NMS算法消除冗余框,对于与裁剪区域边界接触的检测框,可以采用人工消除。
识别结果审核模块,被配置为对识别的结果进行审核,对识别错误的图像重新进行胰腺神经内分泌肿瘤病变区域标注,并修改标注文本信息。
由于胰腺癌等多种情况在超声内镜下的特征表现与PNET相似,所以,需要在超声内镜下PNET识别模型训练完成后,临床测试时,收集识别错误的图像作为负样本添加到训练集中重新训练。
这样能够不断地优化辅助诊断模型的输出结果准确率。
联合判断模块,被配置为将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性。
神经网络推断一张图像可能是错误的,如果连续帧的推断一直指向同一结论,这个确定性就会大大增加。通过这个色带的颜色变化,可以直观的判断当前AI推断的确信度。
因此,设计由浅到深色带图,每一帧图像的输出结果对应一个色带值;临床检查PNET识别模型若输出疑似PNET(PNET网络输出概率>50%)则逐渐加深色带图,反之(PNET网络输出概率<50%)则变浅。
具体地,包括如下过程:
1)设置起始色带值为0;
2)判断当前帧图像PNET输出概率是否大于50%;
3)当PNET输出概率大于50%时,当前色带值累加该概率值;
4)当PNET输出概率小于50%时,当前色带值累减50%与当前输出概率的差值。即:当前色带值=原色带值-(50%-当前PNET输出概率)。
重复步骤2)-4),直到所有的图像判断完毕,按照图像输入顺序将每一帧图像的色带值依次连接得到最终的色带图。
实施例二
在一个或多个实施方式中,公开了一种终端设备,其包括处理器和计算机可读存储介质,处理器用于实现各指令;计算机可读存储介质用于存储多条指令,所述指令适于由处理器加载并执行如图1所述的过程:
通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有PNET病变的内镜图像构建样本集;
使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;
将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性。
在另一些实施方式中,公开了一种计算机可读存储介质,其中存储有多条指令,所述指令适于由终端设备的处理器加载并执行如图1所述的过程:
通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有PNET病变的内镜图像构建样本集;
使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;
将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性。
上述过程的具体实现方法与实施例一中相应的功能模块的工作过程相对应,不再赘述。
上述虽然结合附图对本发明的具体实施方式进行了描述,但并非对本发明保护范围的限制,所属领域技术人员应该明白,在本发明的技术方案的基础上,本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

Claims (7)

1.一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,其特征在于,包括:
图像采集模块,通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有胰腺神经内分泌肿瘤病变的内镜图像构建样本集;
训练集制作模块,被配置为使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
辅助诊断模块,被配置为构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;具体过程包括:通过缩小后的完整图片预测注意力图和粗边界框,以获得图片中病变区域的位置和粗略尺寸;通过检查识别出来的病变区域图片来检测目标;将从注意力图获取到的病变区域的中心位置放大设定倍数,将此时的图像映射回原图;以每一个可能的中心位置为中心,选取设定大小的图像作为裁剪区域;采用角点检测机制生成检测框,通过预测剪裁区域的角点热图以及嵌入和偏移,最后将坐标映射回原图;消除冗余框,最终输出标注了胰腺神经内分泌肿瘤病变区域的边界框;
联合判断模块,被配置为将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性;其中,被配置为将输出结果以色带图的形式进行显示具体包括:步骤(1):设置色带图的初始值;步骤(2):判断当前帧图像胰腺神经内分泌肿瘤输出概率是否大于设定值;如果是,与当前图像对应的色带值增加当前概率值;当胰腺神经内分泌肿瘤输出概率小于设定值时,与当前图像对应的色带值减去设定值与当前输出概率的差值;步骤(3):重复步骤(2),直到所有的图像判断完毕,按照图像输入顺序将每一帧图像的色带值依次连接得到最终的色带图;步骤(4):通过色带图的颜色变化,判断当前辅助诊断模型输出结果的可信度。
2.如权利要求1所述的一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,其特征在于,还包括:图像预处理模块,被配置为对采集到的图像信息进行预处理;所述图像预处理模块进行图像预处理的过程包括:
去除图像中包含的涉及到病人隐私的信息;
对图像进行去除黑色边框处理;
采用双三次插值缩放算法将所有图像分辨率均调整为设定的分辨率大小。
3.如权利要求1所述的一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,其特征在于,还包括:识别结果审核模块,被配置为对识别的结果进行审核,对识别错误的图像重新进行胰腺神经内分泌肿瘤病变区域标注,并修改标注文本信息。
4.如权利要求1所述的一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,其特征在于,对辅助诊断模型进行训练时,使用动态学习率,具体为:
learning_rate=base_lr*(1-epoch/train_epoch)*2;
其中,learning_rate为当前学习率,base_lr为初始学习率,epoch为当前迭代次数,train_epoch为训练总迭代次数。
5.如权利要求1所述的一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***,其特征在于,所述辅助诊断模型将识别出的病变概率大于设定值的病灶区域进行显示,并保存带病灶的图像以及相对应的标签数据,用于再次审核。
6.一种终端设备,其包括处理器和计算机可读存储介质,处理器用于实现各指令;计算机可读存储介质用于存储多条指令,其特征在于,所述指令适于由处理器加载并执行以下过程:
通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有胰腺神经内分泌肿瘤病变的内镜图像构建样本集;
使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;具体过程包括:通过缩小后的完整图片预测注意力图和粗边界框,以获得图片中病变区域的位置和粗略尺寸;通过检查识别出来的病变区域图片来检测目标;将从注意力图获取到的病变区域的中心位置放大设定倍数,将此时的图像映射回原图;以每一个可能的中心位置为中心,选取设定大小的图像作为裁剪区域;采用角点检测机制生成检测框,通过预测剪裁区域的角点热图以及嵌入和偏移,最后将坐标映射回原图;消除冗余框,最终输出标注了胰腺神经内分泌肿瘤病变区域的边界框;
将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性;其中,将输出结果以色带图的形式进行显示具体包括:步骤(1):设置色带图的初始值;步骤(2):判断当前帧图像胰腺神经内分泌肿瘤输出概率是否大于设定值;如果是,与当前图像对应的色带值增加当前概率值;当胰腺神经内分泌肿瘤输出概率小于设定值时,与当前图像对应的色带值减去设定值与当前输出概率的差值;步骤(3):重复步骤(2),直到所有的图像判断完毕,按照图像输入顺序将每一帧图像的色带值依次连接得到最终的色带图;步骤(4):通过色带图的颜色变化,判断当前辅助诊断模型输出结果的可信度。
7.一种计算机可读存储介质,其中存储有多条指令,其特征在于,所述指令适于由终端设备的处理器加载并执行以下过程:
通过采集卡接入内镜主机,获取内镜主机采集到的每一帧图像信息;选取单帧带有胰腺神经内分泌肿瘤病变的内镜图像构建样本集;
使用多目标标注工具对样本集图像中的胰腺神经内分泌肿瘤区域进行标注;同时生成标注位置对应的标注文本信息;所述标注区域以及该区域对应的标注文本信息构成训练集;
构建辅助诊断模型,经过训练集进行优化训练后,对于输入的预处理后的图像进行胰腺神经内分泌肿瘤病变区域识别;具体过程包括:通过缩小后的完整图片预测注意力图和粗边界框,以获得图片中病变区域的位置和粗略尺寸;通过检查识别出来的病变区域图片来检测目标;将从注意力图获取到的病变区域的中心位置放大设定倍数,将此时的图像映射回原图;以每一个可能的中心位置为中心,选取设定大小的图像作为裁剪区域;采用角点检测机制生成检测框,通过预测剪裁区域的角点热图以及嵌入和偏移,最后将坐标映射回原图;消除冗余框,最终输出标注了胰腺神经内分泌肿瘤病变区域的边界框;
将输出结果以色带图的形式进行显示,用于判断胰腺神经内分泌肿瘤病变区域识别结果的准确性;其中,将输出结果以色带图的形式进行显示具体包括:步骤(1):设置色带图的初始值;步骤(2):判断当前帧图像胰腺神经内分泌肿瘤输出概率是否大于设定值;如果是,与当前图像对应的色带值增加当前概率值;当胰腺神经内分泌肿瘤输出概率小于设定值时,与当前图像对应的色带值减去设定值与当前输出概率的差值;步骤(3):重复步骤(2),直到所有的图像判断完毕,按照图像输入顺序将每一帧图像的色带值依次连接得到最终的色带图;步骤(4):通过色带图的颜色变化,判断当前辅助诊断模型输出结果的可信度。
CN201911301799.7A 2019-12-17 2019-12-17 一种超声内镜下识别和定位胰腺神经内分泌肿瘤的*** Active CN110974306B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911301799.7A CN110974306B (zh) 2019-12-17 2019-12-17 一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911301799.7A CN110974306B (zh) 2019-12-17 2019-12-17 一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***

Publications (2)

Publication Number Publication Date
CN110974306A CN110974306A (zh) 2020-04-10
CN110974306B true CN110974306B (zh) 2021-02-05

Family

ID=70094647

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911301799.7A Active CN110974306B (zh) 2019-12-17 2019-12-17 一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***

Country Status (1)

Country Link
CN (1) CN110974306B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7457571B2 (ja) * 2020-05-19 2024-03-28 富士フイルムヘルスケア株式会社 超音波診断装置及び診断支援方法
CN111862109B (zh) * 2020-06-28 2024-02-23 国网山东省电力公司德州供电公司 多目标采集、图像识别及自动标注识别结果的***和装置
CN112085113B (zh) * 2020-09-14 2021-05-04 四川大学华西医院 一种重症肿瘤影像识别***及方法
CN114587416A (zh) * 2022-03-10 2022-06-07 山东大学齐鲁医院 基于深度学习多目标检测的胃肠道粘膜下肿瘤诊断***
CN115187596B (zh) * 2022-09-09 2023-02-10 中国医学科学院北京协和医院 用于腹腔镜结直肠癌手术的神经智能辅助识别***
CN116269749B (zh) * 2023-03-06 2023-10-10 东莞市东部中心医院 一种改良保留性神经的腹腔镜下膀胱癌手术***

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005204958A (ja) * 2004-01-23 2005-08-04 Pentax Corp 自家蛍光観察可能な電子内視鏡装置およびシステム
US9990472B2 (en) * 2015-03-23 2018-06-05 Ohio State Innovation Foundation System and method for segmentation and automated measurement of chronic wound images
CN107862694A (zh) * 2017-12-19 2018-03-30 济南大象信息技术有限公司 一种基于深度学习的手足口病检测***
CN109671053A (zh) * 2018-11-15 2019-04-23 首都医科大学附属北京友谊医院 一种胃癌图像识别***、装置及其应用
CN110335230A (zh) * 2019-03-30 2019-10-15 复旦大学 一种内镜图像病变实时检测方法及装置

Also Published As

Publication number Publication date
CN110974306A (zh) 2020-04-10

Similar Documents

Publication Publication Date Title
CN110974306B (zh) 一种超声内镜下识别和定位胰腺神经内分泌肿瘤的***
CN111325739B (zh) 肺部病灶检测的方法及装置,和图像检测模型的训练方法
CN111951221B (zh) 一种基于深度神经网络的肾小球细胞图像识别方法
DK2973397T3 (en) Tissue-object-based machine learning system for automated assessment of digital whole-slide glass
CN111445478B (zh) 一种用于cta图像的颅内动脉瘤区域自动检测***和检测方法
CN112257704A (zh) 基于深度学习检测模型子宫颈液基细胞数字图像分类方法
US11645753B2 (en) Deep learning-based multi-site, multi-primitive segmentation for nephropathology using renal biopsy whole slide images
CN110570350A (zh) 一种二维卵泡检测方法、装置和超声设备及可读存储介质
CN111340827A (zh) 一种肺部ct影像数据处理分析方法及***
CN108830149B (zh) 一种目标细菌的检测方法及终端设备
CN112215217B (zh) 模拟医师阅片的数字图像识别方法及装置
KR20230097646A (ko) 위장 질환 및 위암 검출률 향상을 위한 인공 지능 기반 위 내시경 영상 진단 보조 시스템 및 방법
CN113516639B (zh) 基于全景x光片的口腔异常检测模型的训练方法及装置
CN113160175B (zh) 一种基于级联网络的肿瘤***浸润检测方法
WO2021159778A1 (zh) 图像处理方法、装置、智能显微镜、可读存储介质和设备
CN116703837B (zh) 一种基于mri图像的肩袖损伤智能识别方法及装置
CN116091522A (zh) 医学图像分割方法、装置、设备及可读存储介质
CN116563305A (zh) 一种血管的异常区域的分割方法、装置及电子设备
CN113255756B (zh) 图像融合方法、装置、电子设备及存储介质
CN113469942B (zh) 一种ct图像病变检测方法
CN114332858A (zh) 病灶检测方法及装置、病灶检测模型获取方法
KR20230099995A (ko) 자궁 경부암의 진단에 대한 정보 제공 방법 및 이를 이용한 자궁 경부암의 진단에 대한 정보 제공용 디바이스
CN111612755A (zh) 肺部病灶分析方法、装置、电子设备和存储介质
Cui et al. Cobb Angle Measurement Method of Scoliosis Based on U-net Network
CN112734707A (zh) 一种3d内窥镜辅助检测方法、***、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information

Inventor after: Li Zhen

Inventor after: Qi Qingqing

Inventor after: Feng Jian

Inventor after: Zuo Xiuli

Inventor after: Li Yanqing

Inventor after: Yang Xiaoyun

Inventor after: Shao Xuejun

Inventor after: Ji Rui

Inventor before: Li Zhen

Inventor before: Qi Qingqing

Inventor before: Feng Jian

Inventor before: Zuo Xiuli

Inventor before: Li Yanqing

Inventor before: Yang Xiaoyun

Inventor before: Shao Xuejun

Inventor before: Ji Rui

CB03 Change of inventor or designer information
GR01 Patent grant
GR01 Patent grant