CN112465830A - 一种磨玻璃样肺结节自动分割方法及计算机设备 - Google Patents
一种磨玻璃样肺结节自动分割方法及计算机设备 Download PDFInfo
- Publication number
- CN112465830A CN112465830A CN202011254470.2A CN202011254470A CN112465830A CN 112465830 A CN112465830 A CN 112465830A CN 202011254470 A CN202011254470 A CN 202011254470A CN 112465830 A CN112465830 A CN 112465830A
- Authority
- CN
- China
- Prior art keywords
- network
- lung
- full convolution
- segmentation method
- glass
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000011218 segmentation Effects 0.000 title claims abstract description 41
- 230000002685 pulmonary effect Effects 0.000 title abstract description 13
- 206010056342 Pulmonary mass Diseases 0.000 claims abstract description 42
- 230000007246 mechanism Effects 0.000 claims abstract description 31
- 238000007781 pre-processing Methods 0.000 claims abstract description 10
- 238000002591 computed tomography Methods 0.000 claims abstract description 6
- 101100295091 Arabidopsis thaliana NUDT14 gene Proteins 0.000 claims abstract 11
- 238000012549 training Methods 0.000 claims description 25
- 238000011176 pooling Methods 0.000 claims description 13
- 230000006870 function Effects 0.000 claims description 12
- 230000004913 activation Effects 0.000 claims description 9
- 210000004072 lung Anatomy 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 5
- 238000012795 verification Methods 0.000 description 5
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 201000005202 lung cancer Diseases 0.000 description 4
- 208000020816 lung neoplasm Diseases 0.000 description 4
- 238000005295 random walk Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 3
- 238000006731 degradation reaction Methods 0.000 description 3
- 230000008034 disappearance Effects 0.000 description 3
- 238000002474 experimental method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000010200 validation analysis Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000003709 image segmentation Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 238000013170 computed tomography imaging Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 210000004276 hyalin Anatomy 0.000 description 1
- 230000003211 malignant effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000024121 nodulation Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 210000004224 pleura Anatomy 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2415—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30061—Lung
- G06T2207/30064—Lung nodule
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
- G06V2201/032—Recognition of patterns in medical or anatomical images of protuberances, polyps nodules, etc.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Biophysics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Molecular Biology (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Health & Medical Sciences (AREA)
- Probability & Statistics with Applications (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本发明涉及一种磨玻璃样肺结节自动分割方法及计算机设备,所述方法包括以下步骤:获取计算机断层扫描设备采集的医学图像原始数据;对所述医学图像原始数据进行预处理;将预处理后的图像作为训练好的基于ASPP结构和注意力机制的全卷积残差网络的输入,获得磨玻璃样肺结节分割结果;所述基于ASPP结构和注意力机制的全卷积残差网络以多个Conv2D卷积层为基础架构,相邻Conv2D卷积层之间设置有残差模块和注意力模块,并在全卷积残差网络中设置ASPP结构以捕获磨玻璃样肺结节的多尺度信息。与现有技术相比,本发明具有快速、准确等优点。
Description
技术领域
本发明涉及深度学习与计算机断层扫描图像处理技术领域,尤其是涉及一种基于全卷积残差网络的磨玻璃样肺结节自动分割方法及计算机设备。
背景技术
肺癌是全球相关癌症死亡的主要原因,当今,计算机断层扫描成像快、图像分辨率高,已成为发现、监测早期肺癌的首选技术。早期肺癌的影像表现是肺结节形成,而准确、快速分割肺结节是良恶性分类中不可或缺的预处理。磨玻璃样肺结节是一类特殊的结节,与实性结节相比,磨玻璃样肺结节具有边界模糊、形状不规则、强度不均匀、与周围正常组织对比度低等特点,易被医生忽略。因此,磨玻璃样肺结节的分割与诊断一直是医学图像分割领域的重点和难点。准确分割磨玻璃样肺结节可为医学影像评价和治疗方案的制定提供重要依据,对提高早期肺癌的监测效率有重要意义。
磨玻璃样肺结节分割方法大多采用无监督方法。传统的无监督方法可分为聚类、可变形模型、基于随机游走(Random Walk,RW)和马尔科夫随机场(Markov random field,MRF)理论的分割方法,如自动化学报上公开的文献“基于稀疏表示和随机游走的磨玻璃型肺结节分割”。这些方法虽在分割复杂背景下的磨玻璃样肺结节有优势,但对人工干预的依赖性也较强,如聚类、基于RW理论的分割方法过度依赖种子点的选择;可变形模型依赖初始轮廓的位置,且对噪声敏感;基于MRF理论的分割方法易消耗不必要的计算。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种快速、准确的基于全卷积残差网络的磨玻璃样肺结节自动分割方法及计算机设备。
本发明的目的可以通过以下技术方案来实现:
一种磨玻璃样肺结节自动分割方法,该方法包括以下步骤:
获取计算机断层扫描设备采集的医学图像原始数据;
对所述医学图像原始数据进行预处理;
将预处理后的图像作为训练好的基于ASPP结构和注意力机制的全卷积残差网络的输入,获得磨玻璃样肺结节分割结果;
所述基于ASPP结构和注意力机制的全卷积残差网络以多个Conv2D卷积层为基础架构,相邻Conv2D卷积层之间设置有残差模块和注意力模块,并在全卷积残差网络中设置ASPP结构以捕获磨玻璃样肺结节的多尺度信息。
进一步地,所述基于ASPP结构和注意力机制的全卷积残差网络的训练过程包括:
获取标记有磨玻璃样肺结节的肺部医学图像原始数据,进行预处理后形成训练样本;
选取初始的网络参数,构建基于ASPP结构和注意力机制的全卷积残差网络,基于该全卷积残差网络,确定训练样本中每个肺部医学图像的类别概率;
基于预设的损失函数计算训练样本中每个肺部医学图像与对应的标签之间的误差;
基于所述误差,更新所述全卷积残差网络的网络参数;
在所述误差满足预设的条件后,得到训练好的全卷积残差网络。
进一步地,所述预处理具体为:
将所述原始数据的CT值调整至设定范围,保存为灰度图像,从该灰度图像中提取感兴趣区域,并对所述感兴趣区域进行one-hot编码。
进一步地,所述预处理具体为:
将所述原始数据的CT值调整至设定范围,保存为灰度图像,从该灰度图像和对应的标签数据中提取感兴趣区域,并对所述感兴趣区域进行one-hot编码。
进一步地,所述设定范围为[-1000,400]Hu。
进一步地,所述基于ASPP结构和注意力机制的全卷积残差网络还包括用于融合低层特征和高层特征的长跳跃连接层。
进一步地,所述基于ASPP结构和注意力机制的全卷积残差网络划分为低层子网络和高层子网络,所述低层子网络中间隔设置有MaxPooling2D池化层,所述高层子网络中间隔设置有ConvTranspose2D卷积层。
进一步地,所述ASPP结构设置于低层子网络与高层子网络之间。
进一步地,所述多个Conv2D卷积层中,输出层采用Sigmoid激活函数,其余层采用Relu激活函数。
本发明还提供一种计算机设备,包括:
一个或多个处理器;
存储器;和
被存储在存储器中的一个或多个程序,所述一个或多个程序包括用于执行如上所述磨玻璃样肺结节自动分割方法的指令。
传统肺结节分割方法需要先对肺实质进行分割,再提取感兴趣区域,然后设计有针对性的算法完成分割,但由于磨玻璃样肺结节灰度不均匀、形状不规则、与周围组织对比度低,且部分结节与血管、胸膜等结构粘连,传统方法难以对该类肺结节进行有效分割。
与现有技术相比,本发明具有如下有益效果:
1、本发明采用训练好的基于ASPP结构和注意力机制的全卷积残差网络直接对原始数据信息进行特征提取,并根据所得特征直接对目标进行分割,效率高,且不依赖人工干预。
2、本发明构建的全卷积残差网络具有ASPP结构,并考虑了注意力机制,其中,ASPP结构可以捕获磨玻璃样肺结节的多尺度信息,有效地从高层特征图中提取多尺度感受野特征,提高了模型处理大小不同结节的能力;注意力机制将编码层中的空间信息传播到解码层,同时减少前向传播过程中信息的丢失,有效减少了传递过程中结节特征信息的损失;将批量标准化层加入残差结构加快了网络训练速度,同时避免了网络深度加深带来的梯度消失、性能退化问题,有效提高了最终图像分割的准确性。
3、本发明还设置有用于有效融合低层特征和高层特征的长跳跃连接层,使整个网络的有效信息损失最小化。
4、本发明进一步在全卷积残差网络中设置MaxPooling2D池化层和ConvTranspose2D卷积层,其中,MaxPooling2D池化层对卷积操作提取的特征进行压缩,一方面使特征变小,简化网络计算复杂度,另一方面进行特征压缩,提取主要特征;ConvTranspose2D卷积层将特征图恢复至原分辨率大小,方便实现端到端的分割预测。
5、本发明可对各种类型的磨玻璃样肺结节进行分割,普适性好。
6、本发明构建基于ASPP结构和注意力机制的全卷积残差网络采用添加在残差模块的批量标准化层,加快了网络训练速度,同时避免了网络深度加深带来的梯度消失、性能退化问题。
7、本发明方法具有计算精度高、时间快、鲁棒性好等优点,能够得到可靠、稳定的结果。
附图说明
图1为本发明方法的流程框图;
图2为基于ASPP结构和注意力机制的全卷积残差网络框架图;
图3为ASPP结构图;
图4为注意力机制结构图;
图5为残差结构图;
图6为基于ASPP结构和注意力机制的全卷积残差网络所得结果,其中,图(a)、(b)分别表示训练集与验证集的损失率对比与训练集与验证集的重叠率对比。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述的实施例。
实施例1
本发明提供一种磨玻璃样肺结节自动分割方法,为一种医学图像自动化处理方法,该方法包括以下步骤:获取计算机断层扫描设备采集的医学图像原始数据;对所述医学图像原始数据进行预处理;将预处理后的图像作为训练好的基于ASPP(Atrous SpatialPyramid Pooling,空洞空间卷积池化金字塔)结构和注意力机制的全卷积残差网络(ResAANet)的输入,获得磨玻璃样肺结节分割结果。该方法中,基于ASPP结构和注意力机制的全卷积残差网络以多个Conv2D卷积层为基础架构,相邻Conv2D卷积层之间设置有残差模块和注意力模块,并在全卷积残差网络中设置ASPP结构以捕获磨玻璃样肺结节的多尺度信息,直接对原始数据进行有效的特征提取,从而快速、准确地获得分割结果,分割过程不依赖人工干预。该方法基于深度学习的有监督方法主要通过神经网络训练结节与标签图像,自动提取结节的相关特征,并自动完成分割。
如图1所示,基于ASPP结构和注意力机制的全卷积残差网络的训练过程包括:
步骤1,获取计算机断层扫描设备采集得到的磨玻璃样肺结节的肺部医学图像原始数据。
步骤2,获取与原始数据对应的标记数据,该标记为放射科医生人工标注的结节类型信息。
步骤3,进行预处理,形成训练样本,将所有训练样本划分为训练集、验证集和测试集三部分,以验证训练好的网络的性能。
步骤4,选取初始的网络参数,构建基于ASPP结构和注意力机制的全卷积残差网络,基于该全卷积残差网络,确定训练样本中每个肺部医学图像的类别概率;基于预设的损失函数计算训练样本中每个肺部医学图像与对应的标签之间的误差;基于所述误差,更新所述全卷积残差网络的网络参数。
步骤5,在所述误差满足预设的条件后,得到训练好的全卷积残差网络。
通过对已知磨玻璃样肺结节数据和标注数据进行训练,将得到的网络用于测试集中磨玻璃样肺结节数据的掩模预测,将得到的分割掩模与已知标注数据进行对比,由此判断构建的全卷积残差网络的可靠、稳定性。
训练过程中的预处理需要同时对原始数据和标记数据进行,具体为:将所述原始数据的CT值调整至设定范围,保存为灰度图像,从该灰度图像中提取以肺结节为中心的感兴趣区域(region of interesting ROI),并对所述感兴趣区域进行one-hot编码。本实施例中,设定范围为[-1000,400]Hu,灰度图像为8bit,感兴趣区域尺寸为256×256。
在优选的实施例中,基于ASPP结构和注意力机制的全卷积残差网络还包括用于融合低层特征和高层特征的长跳跃连接层。
在另一优选的实施例中,基于ASPP结构和注意力机制的全卷积残差网络划分为低层子网络(编码)和高层子网络(解码),所述低层子网络中间隔设置有MaxPooling2D池化层,所述高层子网络中间隔设置有ConvTranspose2D卷积层。
在另一优选的实施例中,多个Conv2D卷积层中,输出层采用Sigmoid激活函数,其余层采用Relu激活函数。
本实施例构建的基于ASPP结构和注意力机制的全卷积残差网络包括Conv2D卷积层、MaxPooling2D池化层、ConvTranspose2D卷积层、ASPP结构、注意力模块、残差模块和长跳跃连接层,其中,Conv2D卷积层用于完成磨玻璃样肺结节特征的提取;MaxPooling2D池化层对卷积操作提取的特征进行压缩,一方面使特征变小,简化网络计算复杂度,另一方面进行特征压缩,提取主要特征;ConvTranspose2D卷积层将特征图恢复至原分辨率大小,完成端到端的分割预测;ASPP结构用于捕获磨玻璃样肺结节的多尺度信息;注意力机制将编码层中的空间信息传播到解码层,同时减少前向传播过程中信息的丢失;残差模块使网络深度得到加深,实现信息跨通道融合,同时避免了残差结构加深网络深度带来的网络梯度消失、性能退化的问题;长跳跃连接层将低层特征和高层特征进行了有效融合,使整个网络的有效信息损失最小化。
该的基于ASPP结构和注意力机制的全卷积残差网络具有自动学习的能力,首先经Conv2D卷积层对其输入的数据进行特征提取,同时为了减少卷积层的特征数进而降低运算参数从而加快计算速度,施加MaxPooling2D池化层对特征进行压缩,提取主要特征,然后利用ConvTranspose2D卷积层将特征图恢复至原分辨率大小,最后使用Sigmoid激活函数完成像素样本的概率预测,并取0.5的阈值生成预测掩模。
本实施例的全卷积残差网络结构如图2所示,具体为:
(1)Conv2D卷积层:Conv1~Conv8的卷积核尺寸均为(3,3),卷积核个数见表1所示;Conv9的卷积核尺寸为(1,1),卷积核个数为1;各卷积步长均为(1,1),每一个卷积层后均包含一个批量标准化层和一个Relu激活函数;
表1 Conv2D卷积层的卷积核大小及个数信息
(2)MaxPooling2D池化层:在第5、10、15、20层分别施加池化层,窗大小均设置为(2,2);
(3)ConvTranspose2D卷积层:在第22、27、32、37层分别施加反卷积层,卷积核的尺寸均为(3,3),卷积核个数分别为128、64、32、16;
(4)ASPP结构:在第21层施加空洞卷积空间金字塔池化结构,并行的空洞卷积采样率分别设置为1、6、12、18;
(5)注意力机制:在每两个残差块后增加一个注意力模块;
(6)残差模块:在Conv1~Conv8每个卷积层后增加两个相同结构的残差模块;
(7)长跳跃连接:将第4与37、9与32、14与27、19与22层进的输出进行全连接;
(8)采用Sigmoid激活函数对磨玻璃样肺结节像素进行分类,并取0.5的阈值生成掩模。
仿真实验:
实验首先对预处理好的磨玻璃样肺结节数据和标注数据进行读取,然后通过预先编写好的程序输入神经网络进行模型训练、验证。本实验涉428个病例的794个磨玻璃样肺结节,其中509个作训练集,56个作验证集,229个作测试集,采用测试集预测掩模与医生的标注结果之间的骰子相似系数、重叠率对分割结果进行评价。
仿真实验结果如图6和表2所示。
表2骰子相似系数、重叠率指标信息
通过训练集与验证集的损失率与重叠率对比发现,损失不断减小,网络不断优化,且最终训练与验证的损失值基本一致,同时,训练与验证的重叠率曲线拟合得也很好,不存在过拟合或欠拟合现象,重叠率达到71.98%,这个结果说明本发明在对磨玻璃样肺结节的分割有效。
通过图6和表2的结果可知,本发明方法能对磨玻璃样肺结节进行快速、准确分割。
实施例2
本实施例提供一种计算机设备,包括一个或多个处理器、存储器和被存储在存储器中的一个或多个程序,所述一个或多个程序包括用于执行如实施例1所述磨玻璃样肺结节自动分割方法的指令。
以上详细描述了本发明的较佳具体实施例。应当理解,本领域的普通技术人员无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此,凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案,皆应在由权利要求书所确定的保护范围内。
Claims (10)
1.一种磨玻璃样肺结节自动分割方法,其特征在于,该方法包括以下步骤:
获取计算机断层扫描设备采集的医学图像原始数据;
对所述医学图像原始数据进行预处理;
将预处理后的图像作为训练好的基于ASPP结构和注意力机制的全卷积残差网络的输入,获得磨玻璃样肺结节分割结果;
所述基于ASPP结构和注意力机制的全卷积残差网络以多个Conv2D卷积层为基础架构,相邻Conv2D卷积层之间设置有残差模块和注意力模块,并在全卷积残差网络中设置ASPP结构以捕获磨玻璃样肺结节的多尺度信息。
2.根据权利要求1所述的磨玻璃样肺结节自动分割方法,其特征在于,所述基于ASPP结构和注意力机制的全卷积残差网络的训练过程包括:
获取标记有磨玻璃样肺结节的肺部医学图像原始数据,进行预处理后形成训练样本;
选取初始的网络参数,构建基于ASPP结构和注意力机制的全卷积残差网络,基于该全卷积残差网络,确定训练样本中每个肺部医学图像的类别概率;
基于预设的损失函数计算训练样本中每个肺部医学图像与对应的标签之间的误差;
基于所述误差,更新所述全卷积残差网络的网络参数;
在所述误差满足预设的条件后,得到训练好的全卷积残差网络。
3.根据权利要求1所述的磨玻璃样肺结节自动分割方法,其特征在于,所述预处理具体为:
将所述原始数据的CT值调整至设定范围,保存为灰度图像,从该灰度图像中提取感兴趣区域,并对所述感兴趣区域进行one-hot编码。
4.根据权利要求2所述的磨玻璃样肺结节自动分割方法,其特征在于,所述预处理具体为:
将所述原始数据的CT值调整至设定范围,保存为灰度图像,从该灰度图像和对应的标签数据中提取感兴趣区域,并对所述感兴趣区域进行one-hot编码。
5.根据权利要求3或4所述的磨玻璃样肺结节自动分割方法,其特征在于,所述设定范围为[-1000,400]Hu。
6.根据权利要求1所述的磨玻璃样肺结节自动分割方法,其特征在于,所述基于ASPP结构和注意力机制的全卷积残差网络还包括用于融合低层特征和高层特征的长跳跃连接层。
7.根据权利要求1所述的磨玻璃样肺结节自动分割方法,其特征在于,所述基于ASPP结构和注意力机制的全卷积残差网络划分为低层子网络和高层子网络,所述低层子网络中间隔设置有MaxPooling2D池化层,所述高层子网络中间隔设置有ConvTranspose2D卷积层。
8.根据权利要求7所述的磨玻璃样肺结节自动分割方法,其特征在于,所述ASPP结构设置于低层子网络与高层子网络之间。
9.根据权利要求1所述的磨玻璃样肺结节自动分割方法,其特征在于,所述多个Conv2D卷积层中,输出层采用Sigmoid激活函数,其余层采用Relu激活函数。
10.一种计算机设备,其特征在于,包括:
一个或多个处理器;
存储器;和
被存储在存储器中的一个或多个程序,所述一个或多个程序包括用于执行如权利要求1-9任一所述磨玻璃样肺结节自动分割方法的指令。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011254470.2A CN112465830B (zh) | 2020-11-11 | 2020-11-11 | 一种磨玻璃样肺结节自动分割方法及计算机设备 |
PCT/CN2021/128438 WO2022100495A1 (zh) | 2020-11-11 | 2021-11-03 | 一种磨玻璃样肺结节自动分割方法及计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011254470.2A CN112465830B (zh) | 2020-11-11 | 2020-11-11 | 一种磨玻璃样肺结节自动分割方法及计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112465830A true CN112465830A (zh) | 2021-03-09 |
CN112465830B CN112465830B (zh) | 2024-04-26 |
Family
ID=74826161
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011254470.2A Active CN112465830B (zh) | 2020-11-11 | 2020-11-11 | 一种磨玻璃样肺结节自动分割方法及计算机设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN112465830B (zh) |
WO (1) | WO2022100495A1 (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113222012A (zh) * | 2021-05-11 | 2021-08-06 | 北京知见生命科技有限公司 | 一种肺部数字病理图像自动定量分析方法及*** |
CN113379773A (zh) * | 2021-05-28 | 2021-09-10 | 陕西大智慧医疗科技股份有限公司 | 基于双重注意力机制的分割模型建立、分割方法及装置 |
CN113486716A (zh) * | 2021-06-04 | 2021-10-08 | 电子科技大学长三角研究院(衢州) | 机场场面目标分割方法及其*** |
CN113570573A (zh) * | 2021-07-28 | 2021-10-29 | 中山仰视科技有限公司 | 混合注意力机制的肺结节假阳性排除方法、***、设备 |
WO2022100495A1 (zh) * | 2020-11-11 | 2022-05-19 | 上海健康医学院 | 一种磨玻璃样肺结节自动分割方法及计算机设备 |
CN116152278A (zh) * | 2023-04-17 | 2023-05-23 | 杭州堃博生物科技有限公司 | 医疗图像的分割方法及装置、非易失性存储介质 |
CN114037709B (zh) * | 2021-11-05 | 2023-06-16 | 复旦大学附属肿瘤医院 | 一种磨玻璃肺结节分割方法及装置 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114926482A (zh) * | 2022-05-31 | 2022-08-19 | 泰安市中心医院 | 一种基于全卷积网络的dce-mri乳腺肿瘤分割方法及设备 |
CN115115628B (zh) * | 2022-08-29 | 2022-11-22 | 山东第一医科大学附属省立医院(山东省立医院) | 一种基于三维精细化残差网络的腔隙性脑梗死识别*** |
CN116051507B (zh) * | 2023-01-28 | 2023-06-20 | 瑞纳智能设备股份有限公司 | 热力管道故障监测方法及存储介质 |
CN116012367B (zh) * | 2023-02-14 | 2023-09-12 | 山东省人工智能研究院 | 一种基于深度学习的胃部胃黏膜特征及位置识别方法 |
CN116188492B (zh) * | 2023-02-21 | 2024-04-26 | 北京长木谷医疗科技股份有限公司 | 髋关节分割方法、装置、电子设备及计算机可读存储介质 |
CN116402779B (zh) * | 2023-03-31 | 2024-07-23 | 北京长木谷医疗科技股份有限公司 | 基于深度学习注意力机制的颈椎图像分割方法及装置 |
CN116403212B (zh) * | 2023-05-16 | 2024-02-02 | 西安石油大学 | 基于改进U-net网络的金相图像的像素中小颗粒识别方法 |
CN117132606B (zh) * | 2023-10-24 | 2024-01-09 | 四川大学 | 用于肺部病变图像的分割方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110189334A (zh) * | 2019-05-28 | 2019-08-30 | 南京邮电大学 | 基于注意力机制的残差型全卷积神经网络的医学图像分割方法 |
CN110728682A (zh) * | 2019-09-09 | 2020-01-24 | 浙江科技学院 | 一种基于残差金字塔池化神经网络的语义分割方法 |
US20200258218A1 (en) * | 2018-03-14 | 2020-08-13 | Dalian University Of Technology | Method based on deep neural network to extract appearance and geometry features for pulmonary textures classification |
CN111739075A (zh) * | 2020-06-15 | 2020-10-02 | 大连理工大学 | 一种结合多尺度注意力的深层网络肺部纹理识别方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112465830B (zh) * | 2020-11-11 | 2024-04-26 | 上海健康医学院 | 一种磨玻璃样肺结节自动分割方法及计算机设备 |
-
2020
- 2020-11-11 CN CN202011254470.2A patent/CN112465830B/zh active Active
-
2021
- 2021-11-03 WO PCT/CN2021/128438 patent/WO2022100495A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20200258218A1 (en) * | 2018-03-14 | 2020-08-13 | Dalian University Of Technology | Method based on deep neural network to extract appearance and geometry features for pulmonary textures classification |
CN110189334A (zh) * | 2019-05-28 | 2019-08-30 | 南京邮电大学 | 基于注意力机制的残差型全卷积神经网络的医学图像分割方法 |
CN110728682A (zh) * | 2019-09-09 | 2020-01-24 | 浙江科技学院 | 一种基于残差金字塔池化神经网络的语义分割方法 |
CN111739075A (zh) * | 2020-06-15 | 2020-10-02 | 大连理工大学 | 一种结合多尺度注意力的深层网络肺部纹理识别方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022100495A1 (zh) * | 2020-11-11 | 2022-05-19 | 上海健康医学院 | 一种磨玻璃样肺结节自动分割方法及计算机设备 |
CN113222012A (zh) * | 2021-05-11 | 2021-08-06 | 北京知见生命科技有限公司 | 一种肺部数字病理图像自动定量分析方法及*** |
CN113379773A (zh) * | 2021-05-28 | 2021-09-10 | 陕西大智慧医疗科技股份有限公司 | 基于双重注意力机制的分割模型建立、分割方法及装置 |
CN113379773B (zh) * | 2021-05-28 | 2023-04-28 | 陕西大智慧医疗科技股份有限公司 | 基于双重注意力机制的分割模型建立、分割方法及装置 |
CN113486716A (zh) * | 2021-06-04 | 2021-10-08 | 电子科技大学长三角研究院(衢州) | 机场场面目标分割方法及其*** |
CN113570573A (zh) * | 2021-07-28 | 2021-10-29 | 中山仰视科技有限公司 | 混合注意力机制的肺结节假阳性排除方法、***、设备 |
CN114037709B (zh) * | 2021-11-05 | 2023-06-16 | 复旦大学附属肿瘤医院 | 一种磨玻璃肺结节分割方法及装置 |
CN116152278A (zh) * | 2023-04-17 | 2023-05-23 | 杭州堃博生物科技有限公司 | 医疗图像的分割方法及装置、非易失性存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2022100495A1 (zh) | 2022-05-19 |
CN112465830B (zh) | 2024-04-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112465830A (zh) | 一种磨玻璃样肺结节自动分割方法及计算机设备 | |
US20230186476A1 (en) | Object detection and instance segmentation of 3d point clouds based on deep learning | |
CN111488921B (zh) | 一种全景数字病理图像智能分析***及方法 | |
CN111369565B (zh) | 一种基于图卷积网络的数字病理图像的分割与分类方法 | |
CN114120102A (zh) | 边界优化的遥感图像语义分割方法、装置、设备及介质 | |
CN112862830B (zh) | 一种多模态图像分割方法、***、终端及可读存储介质 | |
Taha et al. | Automatic polyp detection in endoscopy videos: A survey | |
CN112446892A (zh) | 一种基于注意力学习的细胞核分割方法 | |
JP7427080B2 (ja) | 細胞検出およびセグメンテーションのための弱教師ありマルチタスク学習 | |
CN111598871B (zh) | 多特征融合辅助检测肺部磨玻璃影结节***及介质 | |
CN101551854B (zh) | 不平衡医学影像处理***及其处理方法 | |
CN111553892A (zh) | 基于深度学习的肺结节分割计算方法、装置及*** | |
CN112712528A (zh) | 一种多尺度u型残差编码器与整体反向注意机制结合的肠道病灶分割方法 | |
CN109214388B (zh) | 一种基于个性化融合网络的肿瘤分割方法及装置 | |
CN112132827A (zh) | 病理图像的处理方法、装置、电子设备及可读存储介质 | |
CN113269224A (zh) | 一种场景图像分类方法、***及存储介质 | |
CN113269799A (zh) | 一种基于深度学习的宫颈细胞分割方法 | |
CN113764101B (zh) | 基于cnn的乳腺癌新辅助化疗多模态超声诊断*** | |
CN117495882B (zh) | 一种基于AGCH-Net和多尺度融合的肝脏肿瘤CT图像分割方法 | |
CN113177554B (zh) | 甲状腺结节识别与分割方法、***、存储介质及设备 | |
CN112950612A (zh) | 一种基于卷积神经网络的脑肿瘤图像分割方法 | |
CN112053320A (zh) | 一种用于直肠癌***转移的智能诊断模型构建方法 | |
CN116840931A (zh) | 一种基于高光谱成像技术的输液软袋灯检方法 | |
Hwang et al. | RBCA-Net: Reverse boundary channel attention network for kidney tumor segmentation in CT images | |
Duraipandian et al. | Smart digital mammographic screening system for bulk image processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |