CN110232383B - 一种基于深度学习模型的病灶图像识别方法及病灶图像识别*** - Google Patents
一种基于深度学习模型的病灶图像识别方法及病灶图像识别*** Download PDFInfo
- Publication number
- CN110232383B CN110232383B CN201910527716.XA CN201910527716A CN110232383B CN 110232383 B CN110232383 B CN 110232383B CN 201910527716 A CN201910527716 A CN 201910527716A CN 110232383 B CN110232383 B CN 110232383B
- Authority
- CN
- China
- Prior art keywords
- image
- focus
- deep learning
- learning model
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明涉及医疗设备技术领域,公开了一种基于深度学习模型的病灶图像识别方法及病灶图像识别***。通过本发明创造,提供了一种基于深度学习模型的且能够替代医生自动识别医疗图像中病情的新方法及新***,即针对获取的待检测医疗图像,通过依次进行最小器官组织影像的分割以及对应器官组织的影像识别、深度学习模型预测和预测结果图上标记,可以替代医生发现医疗图像中的潜在病情,并自动地在医疗图像上进行病灶组织的识别标记,以便提醒医生做进一步的诊断,及时确诊病情,进而能够减轻医生的工作强度,及时确诊是否有病变发生,避免耽搁病情的治疗时机,尤其有助于早期病变的发现。
Description
技术领域
本发明属于医疗设备技术领域,具体地涉及一种基于深度学习模型的病灶图像识别方法及病灶图像识别***。
背景技术
目前医疗器械市场上的医疗摄影设备都是可以看到医疗影像的,例如血管摄影图像(Angiography)、心血管造影图像(Cardiac angiography)、电脑断层扫描图像(CT,Computerized tomography)、***摄影图像(Mammography)、正子发射断层扫描图像(PET,Positron emission tomography)、核磁共振成像图像(NMRI,Nuclear magneticresonance imaging)和医学超音波检查图像(Medical ultrasonography)等。但是对于病灶的发现或识别,仍是医生凭借专业知识用肉眼去判断是否有发生病变问题,如此在病变初期,由于病灶往往比较微小,很容易被忽略,同时在诸如支气管等器官组织的观察中,由于需要察看部位比较多,而医生需要每一个部位仔细观察,大大增强了医生的工作强度。因此,如何减轻医生的工作强度并快速及早地发现病情,是一个急需解决的问题。
发明内容
为了解决现有医疗设备不能减轻医生的工作强度并快速及早地发现病情的问题,本发明目的在于提供一种基于深度学习模型的病灶图像识别方法及病灶图像识别***。
本发明所采用的技术方案为:
一种基于深度学习模型的病灶图像识别方法,包括如下步骤:
S101.获取待检测医疗图像;
S102.对所述待检测医疗图像进行图像分割处理,得到若干个互不相交的待检测区域图像;
S103.针对每个待检测区域图像,先提取图像轮廓特征,然后若根据提取的图像轮廓特征识别出对应的器官组织,则依次执行步骤S301~S302:
S301.根据器官组织识别结果确定适用的且已完成病灶图像识别训练的深度学习模型,然后将待检测区域图像导入到该深度学习模型中进行预测运算,得到对应的病灶图像识别类型和病灶图像识别准确率,其中,所述病灶图像识别类型包括无病灶类型和有病灶类型;
S302.若得到的病灶图像识别类型为有病灶类型且病灶图像识别准确率不小于第一阈值,则在所述待检测医疗图像上且与待检测区域图像对应的位置标记得到的病灶图像识别类型和病灶图像识别准确率;
S104.输出完成病灶标记的医疗图像。
具体的,在所述步骤S101中,所述待检测医疗图像为血管摄影图像、心血管造影图像、电脑断层扫描图像、***摄影图像、正子发射断层扫描图像、核磁共振成像图像和医学超音波检查图像。
具体的,在所述步骤S102中,所述进行图像分割处理的方式为基于阈值的图像分割方式、基于区域生长法的图像分割方式、基于变形模型的图像分割方式、基于图论的图像分割方式、基于聚类的图像分割方式或基于分类的图像分割方式。
优化的,在所述步骤S103之前,还包括有如下步骤:
S300.获取多种不同器官组织的标准医疗图像,然后针对每种器官组织的标准医疗图像,分别提取出对应的标准图像轮廓特征。
具体的,采用基于点分布模型的ASM算法提取图像中的图像轮廓特征。
具体的,在所述步骤S103中,按照如下方式来根据提取的图像轮廓特征识别出对应的器官组织:将待检测区域图像的图像轮廓特征逐一地与各种器官组织的标准图像轮廓特征进行相似度计算,将相似度最高且相似度超过第二阈值的器官组织作为识别出的对应器官组织。
优化的,在所述步骤S301之前,按照如下步骤S201~S203对适用于某个器官组织的深度学习模型进行病灶图像识别训练:
S201.获取该器官组织的样本医疗图像以及与各个样本医疗图像绑定的已标注病灶图像识别类型,其中,针对各种病灶图像识别类型,对应样本医疗图像的数目不少于1000张;
S202.将各个样本医疗图像及对应的已标注病灶图像识别类型作为一次训练样本,导入到深度学习模型中进行病灶图像识别训练,其中,将样本医疗图像作为样本输入数据,将与样本医疗图像对应的已标注病灶图像识别类型作为样本校验数据;
S203.在病灶图像识别训练过程中,根据训练所得的病灶图像识别类型与样本校验数据的匹配结果,不断优化深度学习模型,直到完成训练或者直到训练所得的病灶图像识别类型与样本校验数据的匹配率达到第三阈值。
优化的,在所述步骤S301中且将待检测区域图像导入到确定的深度学习模型之前:对该待检测区域图像进行缩放处理,使处理后的图像尺寸长度或宽度与样本医疗图像一致。
具体的,在所述步骤S301中,所述深度学习模型采用基于CNN架构的卷积神经网络模型。
本发明所采用的另一种技术方案为:
一种基于深度学习模型的病灶图像识别***,包括图像获取模块、图像分割模块、器官识别模块、深度学习模块、病灶标记模块和图像输出模块;
所述图像获取模块,用于获取待检测医疗图像;
所述图像分割模块,通信连接所述图像获取模块,用于对获取的待检测医疗图像进行图像分割处理,得到若干个互不相交的待检测区域图像;
所述器官识别模块,通信连接所述图像分割模块,用于提取待检测区域图像的图像轮廓特征,然后根据提取的图像轮廓特征识别出对应的器官组织;
所述深度学习模块,通信连接所述器官识别模块,用于根据器官组织识别结果确定适用的且已完成病灶图像识别训练的深度学习模型,然后将待检测区域图像导入到该深度学习模型中进行预测运算,得到对应的病灶图像识别类型和病灶图像识别准确率,其中,所述病灶图像识别类型包括无病灶类型和有病灶类型;
所述病灶标记模块,分别通信连接所述图像获取模块和所述深度学习模块,用于当发现得到的病灶图像识别类型为有病灶类型且病灶图像识别准确率大于第一阈值时,在所述待检测医疗图像上且与待检测区域图像对应的位置标记得到的病灶图像识别类型和病灶图像识别准确率;
所述图像输出模块,通信连接所述病灶标记模块,用于输出完成病灶标记的医疗图像。
本发明的有益效果为:
(1)本发明创造提供了一种基于深度学习模型的且能够替代医生自动识别医疗图像中病情的新方法及新***,即针对获取的待检测医疗图像,通过依次进行最小器官组织影像的分割以及对应器官组织的影像识别、深度学习模型预测和预测结果图上标记,可以替代医生发现医疗图像中的潜在病情,并自动地在医疗图像上进行病灶组织的识别标记,以便提醒医生做进一步的诊断,及时确诊病情,进而能够减轻医生的工作强度,及时确诊是否有病变发生,避免耽搁病情的治疗时机,尤其有助于早期病变的发现。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的病灶图像识别方法的流程示意图。
图2是本发明提供的病灶图像识别***的结构示意图。
具体实施方式
下面结合附图及具体实施例来对本发明作进一步阐述。在此需要说明的是,对于这些实施例方式的说明虽然是用于帮助理解本发明,但并不构成对本发明的限定。本文公开的特定结构和功能细节仅用于描述本发明的示例实施例。然而,可用很多备选的形式来体现本发明,并且不应当理解为本发明限制在本文阐述的实施例中。
应当理解,尽管本文可能使用术语第一、第二等等来描述各种单元,但是这些单元不应当受到这些术语的限制。这些术语仅用于区分一个单元和另一个单元。例如可以将第一单元称作第二单元,并且类似地可以将第二单元称作第一单元,同时不脱离本发明的示例实施例的范围。
应当理解,对于本文中可能出现的术语“和/或”,其仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,单独存在B,同时存在A和B三种情况;对于本文中可能出现的术语“/和”,其是描述另一种关联对象关系,表示可以存在两种关系,例如,A/和B,可以表示:单独存在A,单独存在A和B两种情况;另外,对于本文中可能出现的字符“/”,一般表示前后关联对象是一种“或”关系。
应当理解,在本文中若将单元称作与另一个单元“连接”、“相连”或“耦合”时,它可以与另一个单元直相连接或耦合,或中间单元可以存在。相対地,在本文中若将单元称作与另一个单元“直接相连”或“直接耦合”时,表示不存在中间单元。另外,应当以类似方式来解释用于描述单元之间的关系的其他单词(例如,“在……之间”对“直接在……之间”,“相邻”对“直接相邻”等等)。
应当理解,本文使用的术语仅用于描述特定实施例,并不意在限制本发明的示例实施例。若本文所使用的,单数形式“一”、“一个”以及“该”意在包括复数形式,除非上下文明确指示相反意思。还应当理解,若术语“包括”、“包括了”、“包含”和/或“包含了”在本文中被使用时,指定所声明的特征、整数、步骤、操作、单元和/或组件的存在性,并且不排除一个或多个其他特征、数量、步骤、操作、单元、组件和/或他们的组合存在性或增加。
应当理解,还应当注意到在一些备选实施例中,所出现的功能/动作可能与附图出现的顺序不同。例如,取决于所涉及的功能/动作,实际上可以实质上并发地执行,或者有时可以以相反的顺序来执行连续示出的两个图。
应当理解,在下面的描述中提供了特定的细节,以便于对示例实施例的完全理解。然而,本领域普通技术人员应当理解可以在没有这些特定细节的情况下实现示例实施例。例如可以在框图中示出***,以避免用不必要的细节来使得示例不清楚。在其他实例中,可以不以不必要的细节来示出众所周知的过程、结构和技术,以避免使得示例实施例不清楚。
实施例一
如图1所示,本实施例提供的所述基于深度学习模型的病灶图像识别方法,包括如下步骤S101~S104。
S101.获取待检测医疗图像。
在所述步骤S101中,所述待检测医疗图像具体可从现有医疗摄影设备的输出接口(例如USB接口或HDMI接口)中导出得到。具体的,所述待检测医疗图像可以但不限于为血管摄影图像、心血管造影图像、电脑断层扫描图像、***摄影图像、正子发射断层扫描图像、核磁共振成像图像和医学超音波检查图像等。
S102.对所述待检测医疗图像进行图像分割处理,得到若干个互不相交的待检测区域图像。
在所述步骤S102中,由于在待检测医疗图像中一般会包含多个器官组织的影像,因此通过图像分割处理,可以将单个器官组织的影像限定在一个待检测区域图像中(部分待检测区域图像中可能还没有器官组织的影像),以便后续对单个器官组织是否为病灶组织进行有效识别。具体的,所述进行图像分割处理的方式可以但不限于为基于阈值的图像分割方式、基于区域生长法的图像分割方式、基于变形模型的图像分割方式、基于图论的图像分割方式、基于聚类的图像分割方式或基于分类的图像分割方式等,前述图像分割处理方式均为现有技术,于此不在赘述。
S103.针对每个待检测区域图像,先提取图像轮廓特征,然后若根据提取的图像轮廓特征识别出对应的器官组织,则依次执行步骤S301~S302。
在所述步骤S103中,可以但不限于采用基于点分布模型的ASM算法提取待检测区域图像中的图像轮廓特征。所述ASM(Active Shape Model)算法是一种现有的基于点分布模型(Point Distribution Model,PDM)的算法,在PDM中,对于外形相似的物体,例如心脏、肺部等的几何形状可以通过由若干关键特征点的坐标依次串联形成一个形状向量来表示,如此在采用ASM算法对所述待检测区域图像进行处理后,可以提取到对应的图像轮廓特征。
在所述步骤S103之前,为了实现能够根据提取的图像轮廓特征识别出对应的器官组织的目的,需要准备多种不同器官组织的标准图像轮廓特征,以便进行比较识别,即还包括有如下步骤:S300.获取多种不同器官组织的标准医疗图像,然后针对每种器官组织的标准医疗图像,分别提取出对应的标准图像轮廓特征。其中,仍然可以但不限于采用基于点分布模型的ASM算法提取标准医疗图像中的图像轮廓特征。
进一步具体的,可按照如下方式来根据提取的图像轮廓特征识别出对应的器官组织:将待检测区域图像的图像轮廓特征逐一地与各种器官组织的标准图像轮廓特征进行相似度计算,将相似度最高且相似度超过第二阈值的器官组织作为识别出的对应器官组织。其中,所用到的相似度计算算法为现有算法,所述第二阈值既可是预先设定的门限值,也可以是默认值,例如50%。由于存在不能识别出对应器官组织的情况,即所有相似度都低于所述第二阈值或所述待检测区域图像中就没有器官组织的影像,如此可跳过步骤S301~S302。
S301.根据器官组织识别结果确定适用的且已完成病灶图像识别训练的深度学习模型,然后将待检测区域图像导入到该深度学习模型中进行预测运算,得到对应的病灶图像识别类型和病灶图像识别准确率,其中,所述病灶图像识别类型包括无病灶类型和有病灶类型。
在所述步骤S301中且进行预测前,需要根据器官组织识别结果来选择合适的且已完成病灶图像识别训练的深度学习模型,即针对心脏和肺部等不同器官组织,由于病灶现象不同,它们的图像识别特征也必然不同,因此需要选择不同的且已完成对应病灶图像识别训练的深度学习模型来进行预测。所述深度学习模型是一种应用类似于大脑神经突触联接的结构进行信息化处理的数学计算模型,其由大量的节点(或称神经元)和之间相互联接构成,且每个节点代表一种特定的输出函数,称为激励函数(activation function);每两个节点间的连接都代表一个对于通过该连接信号的加权值,称之为权重,这相当于人工神经网络的记忆;网络的输出则依赖神经网络的连接方式、权重值和激励函数的不同而不同。由此所述深度学习模型可以通过一个基于数学统计学类型的学习方法(Learning Method)得以优化,具有自学习功能、联想存储功能和高速寻找优化解的功能等特点和优越性。具体的,所述深度学习模型可以但不限于采用基于CNN架构的卷积神经网络模型,其中,CNN(Convolutional Neural Networks,卷积神经网络)是一类神经网络的总称,可以通过Caffe(CNN架构的一种具体实现)来实现,使预测模型具有上手快、速度快、可模块化、开放性好和社区性好等特点。在通过深度学习模型进行预测运算后,会自动输出与待检测区域图像对应的病灶图像识别类型和病灶图像识别准确率。另外,所述有病灶类型还可以根据病情种类和严重程度进行进一步地细分,例如针对肺部,还可以细分为肺结核早期、肺结核中期、肺结核晚期、肺肿瘤早期、肺肿瘤中期和肺肿瘤晚期等。
在所述步骤S301之前,必需提前对所选器官组织的深度学习模型进行对应的病灶图像识别训练,即可按照如下步骤S201~S203对适用于某个器官组织的深度学习模型进行病灶图像识别训练:S201.获取该器官组织的样本医疗图像以及与各个样本医疗图像绑定的已标注病灶图像识别类型,其中,针对各种病灶图像识别类型,对应样本医疗图像的数目不少于1000张;S202.将各个样本医疗图像及对应的已标注病灶图像识别类型作为一次训练样本,导入到深度学习模型中进行病灶图像识别训练,其中,将样本医疗图像作为样本输入数据,将与样本医疗图像对应的已标注病灶图像识别类型作为样本校验数据;S203.在病灶图像识别训练过程中,根据训练所得的病灶图像识别类型与样本校验数据的匹配结果,不断优化深度学习模型,直到完成训练或者直到训练所得的病灶图像识别类型与样本校验数据的匹配率达到第三阈值。在所述步骤S203中,所述第三阈值既可是预先设定的门限值,也可以是默认值,例如99%。当所述深度学习模型采用基于Caffe架构(即CNN架构的一种具体实现形式)的卷积神经网络模型时,可以利用由accuracy层得来的识别准确率作为训练所得的病灶图像识别类型与样本校验数据的匹配率,识别准确率越高,即匹配率越高,匹配性越好。此外,为了进一步提升预测准确性,优化的,在所述步骤S301中且将待检测区域图像导入到确定的深度学习模型之前:对该待检测区域图像进行缩放处理,使处理后的图像尺寸长度或宽度与样本医疗图像一致。
S302.若得到的病灶图像识别类型为有病灶类型且病灶图像识别准确率不小于第一阈值,则在所述待检测医疗图像上且与待检测区域图像对应的位置标记得到的病灶图像识别类型和病灶图像识别准确率。
在所述步骤S302中,所述第一阈值既可是预先设定的门限值,也可以是默认值,例如75%。由此通过前述病灶标记方法,可以自动得到标记多种病灶情况的医疗图像,以便提醒医生进行进一步的诊断,及时确诊病情。
S104.输出完成病灶标记的医疗图像。
综上,采用本实施例所提供的基于深度学习模型的病灶图像识别方法,具有如下技术效果:
(1)本实施例提供了一种基于深度学习模型的且能够替代医生自动识别医疗图像中病情的新方法,即针对获取的待检测医疗图像,通过依次进行最小器官组织影像的分割以及对应器官组织的影像识别、深度学习模型预测和预测结果图上标记,可以替代医生发现医疗图像中的潜在病情,并自动地在医疗图像上进行病灶组织的识别标记,以便提醒医生做进一步的诊断,及时确诊病情,进而能够减轻医生的工作强度,及时确诊是否有病变发生,避免耽搁病情的治疗时机,尤其有助于早期病变的发现。
实施例二
如图2所示,本实施例相对于实施例一,提供了一种基于相同发明构思的且基于深度学习模型的病灶图像识别***,包括图像获取模块、图像分割模块、器官识别模块、深度学习模块、病灶标记模块和图像输出模块;所述图像获取模块,用于获取待检测医疗图像;所述图像分割模块,通信连接所述图像获取模块,用于对获取的待检测医疗图像进行图像分割处理,得到若干个互不相交的待检测区域图像;所述器官识别模块,通信连接所述图像分割模块,用于提取待检测区域图像的图像轮廓特征,然后根据提取的图像轮廓特征识别出对应的器官组织;所述深度学习模块,通信连接所述器官识别模块,用于根据器官组织识别结果确定适用的且已完成病灶图像识别训练的深度学习模型,然后将待检测区域图像导入到该深度学习模型中进行预测运算,得到对应的病灶图像识别类型和病灶图像识别准确率,其中,所述病灶图像识别类型包括无病灶类型和有病灶类型;所述病灶标记模块,分别通信连接所述图像获取模块和所述深度学习模块,用于当发现得到的病灶图像识别类型为有病灶类型且病灶图像识别准确率大于第一阈值时,在所述待检测医疗图像上且与待检测区域图像对应的位置标记得到的病灶图像识别类型和病灶图像识别准确率;所述图像输出模块,通信连接所述病灶标记模块,用于输出完成病灶标记的医疗图像。
本实施例中各个功能模块的具体技术细节以及总的技术效果,可参照实施例一直接推导得到,于此不在赘述。
以上所描述的多个实施例仅仅是示意性的,若涉及到作为分离部件说明的单元,其可以是或者也可以不是物理上分开的;若涉及到作为单元显示的部件,其可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
最后应说明的是,本发明不局限于上述可选的实施方式,任何人在本发明的启示下都可得出其他各种形式的产品。上述具体实施方式不应理解成对本发明的保护范围的限制,本发明的保护范围应当以权利要求书中界定的为准,并且说明书可以用于解释权利要求书。
Claims (8)
1.一种基于深度学习模型的病灶图像识别方法,其特征在于,包括如下步骤:
S101.获取待检测医疗图像;
S102.对所述待检测医疗图像进行图像分割处理,得到若干个互不相交的待检测区域图像;
S300.获取多种不同器官组织的标准医疗图像,然后针对每种器官组织的标准医疗图像,分别提取出对应的标准图像轮廓特征;
S103.针对每个待检测区域图像,先提取图像轮廓特征,然后将所述图像轮廓特征逐一地与各种器官组织的标准图像轮廓特征进行相似度计算,将相似度最高且相似度超过第二阈值的器官组织作为识别出的对应器官组织,若根据提取的图像轮廓特征识别出对应的器官组织,则依次执行步骤S301~S302:
S301.根据器官组织识别结果确定适用的且已完成病灶图像识别训练的深度学习模型,然后将待检测区域图像导入到该深度学习模型中进行预测运算,得到对应的病灶图像识别类型和病灶图像识别准确率,其中,所述病灶图像识别类型包括无病灶类型和有病灶类型;
S302.若得到的病灶图像识别类型为有病灶类型且病灶图像识别准确率不小于第一阈值,则在所述待检测医疗图像上且与待检测区域图像对应的位置标记得到的病灶图像识别类型和病灶图像识别准确率;
S104.输出完成病灶标记的医疗图像。
2.如权利要求1所述的一种基于深度学习模型的病灶图像识别方法,其特征在于:在所述步骤S101中,所述待检测医疗图像为血管摄影图像、心血管造影图像、电脑断层扫描图像、***摄影图像、正子发射断层扫描图像、核磁共振成像图像和医学超音波检查图像。
3.如权利要求1所述的一种基于深度学习模型的病灶图像识别方法,其特征在于:在所述步骤S102中,所述进行图像分割处理的方式为基于阈值的图像分割方式、基于区域生长法的图像分割方式、基于变形模型的图像分割方式、基于图论的图像分割方式、基于聚类的图像分割方式或基于分类的图像分割方式。
4.如权利要求1所述的一种基于深度学习模型的病灶图像识别方法,其特征在于:采用基于点分布模型的ASM算法提取图像中的图像轮廓特征。
5.如权利要求1所述的一种基于深度学习模型的病灶图像识别方法,其特征在于,在所述步骤S301之前,按照如下步骤S201~S203对适用于某个器官组织的深度学习模型进行病灶图像识别训练:
S201.获取该器官组织的样本医疗图像以及与各个样本医疗图像绑定的已标注病灶图像识别类型,其中,针对各种病灶图像识别类型,对应样本医疗图像的数目不少于1000张;
S202.将各个样本医疗图像及对应的已标注病灶图像识别类型作为一次训练样本,导入到深度学习模型中进行病灶图像识别训练,其中,将样本医疗图像作为样本输入数据,将与样本医疗图像对应的已标注病灶图像识别类型作为样本校验数据;
S203.在病灶图像识别训练过程中,根据训练所得的病灶图像识别类型与样本校验数据的匹配结果,不断优化深度学习模型,直到完成训练或者直到训练所得的病灶图像识别类型与样本校验数据的匹配率达到第三阈值。
6.如权利要求1所述的一种基于深度学习模型的病灶图像识别方法,其特征在于,在所述步骤S301中且将待检测区域图像导入到确定的深度学习模型之前:对该待检测区域图像进行缩放处理,使处理后的图像尺寸长度或宽度与样本医疗图像一致。
7.如权利要求1所述的一种基于深度学习模型的病灶图像识别方法,其特征在于:在所述步骤S301中,所述深度学习模型采用基于CNN架构的卷积神经网络模型。
8.一种基于深度学习模型的病灶图像识别***,其特征在于:包括图像获取模块、图像分割模块、器官识别模块、深度学习模块、病灶标记模块和图像输出模块;
所述图像获取模块,用于获取待检测医疗图像;
所述图像分割模块,通信连接所述图像获取模块,用于对获取的待检测医疗图像进行图像分割处理,得到若干个互不相交的待检测区域图像;
所述器官识别模块,通信连接所述图像分割模块,用于获取多种不同器官组织的标准医疗图像,然后针对每种器官组织的标准医疗图像,分别提取出对应的标准图像轮廓特征,以及用于针对每个待检测区域图像,先提取图像轮廓特征,然后将所述图像轮廓特征逐一地与各种器官组织的标准图像轮廓特征进行相似度计算,将相似度最高且相似度超过第二阈值的器官组织作为识别出的对应器官组织;
所述深度学习模块,通信连接所述器官识别模块,用于根据器官组织识别结果确定适用的且已完成病灶图像识别训练的深度学习模型,然后将待检测区域图像导入到该深度学习模型中进行预测运算,得到对应的病灶图像识别类型和病灶图像识别准确率,其中,所述病灶图像识别类型包括无病灶类型和有病灶类型;
所述病灶标记模块,分别通信连接所述图像获取模块和所述深度学习模块,用于当发现得到的病灶图像识别类型为有病灶类型且病灶图像识别准确率大于第一阈值时,在所述待检测医疗图像上且与待检测区域图像对应的位置标记得到的病灶图像识别类型和病灶图像识别准确率;
所述图像输出模块,通信连接所述病灶标记模块,用于输出完成病灶标记的医疗图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910527716.XA CN110232383B (zh) | 2019-06-18 | 2019-06-18 | 一种基于深度学习模型的病灶图像识别方法及病灶图像识别*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910527716.XA CN110232383B (zh) | 2019-06-18 | 2019-06-18 | 一种基于深度学习模型的病灶图像识别方法及病灶图像识别*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110232383A CN110232383A (zh) | 2019-09-13 |
CN110232383B true CN110232383B (zh) | 2021-07-02 |
Family
ID=67859748
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910527716.XA Active CN110232383B (zh) | 2019-06-18 | 2019-06-18 | 一种基于深度学习模型的病灶图像识别方法及病灶图像识别*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110232383B (zh) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110766701B (zh) * | 2019-10-31 | 2020-11-06 | 北京推想科技有限公司 | 网络模型训练方法及装置、区域划分方法及装置 |
CN110837572B (zh) * | 2019-11-15 | 2020-10-13 | 北京推想科技有限公司 | 图像检索方法、装置、可读存储介质及电子设备 |
CN110867233B (zh) * | 2019-11-19 | 2023-05-05 | 西安邮电大学 | 用于生成电子喉镜医学检测报告的***和方法 |
CN110859642B (zh) * | 2019-11-26 | 2024-01-23 | 北京华医共享医疗科技有限公司 | 一种基于AlexNet网络模型实现医学影像辅助诊断的方法、装置、设备及存储介质 |
CN112991166A (zh) * | 2019-12-16 | 2021-06-18 | 无锡祥生医疗科技股份有限公司 | 智能辅助导引方法、超声设备及存储介质 |
CN110897865A (zh) * | 2019-12-25 | 2020-03-24 | 中科彭州智慧产业创新中心有限公司 | 耳穴引导装置及方法 |
CN111192249B (zh) * | 2019-12-30 | 2023-06-20 | 辽宁师范大学 | 基于机器学习的能量泛函模型的医学图像病变区域分割方法 |
CN111383328B (zh) * | 2020-02-27 | 2022-05-20 | 西安交通大学 | 一种面向乳腺癌病灶的3d可视化方法及*** |
CN111382785B (zh) * | 2020-03-04 | 2023-09-01 | 武汉精立电子技术有限公司 | 一种gan网络模型及实现样本自动清洗、辅助标记的方法 |
CN111383211A (zh) * | 2020-03-04 | 2020-07-07 | 深圳大学 | 骨案例识别方法、装置、服务器及存储介质 |
CN111753831A (zh) * | 2020-06-28 | 2020-10-09 | 上海联影医疗科技有限公司 | 一种图像分析方法、装置、图像采集设备及存储介质 |
CN111899848B (zh) * | 2020-08-05 | 2023-07-07 | 中国联合网络通信集团有限公司 | 图像识别方法及设备 |
CN112263269B (zh) * | 2020-09-22 | 2024-04-19 | 北京赛迈特锐医疗科技有限公司 | 泌尿系x线平片结石智能检测***及方法 |
TWI792055B (zh) * | 2020-09-25 | 2023-02-11 | 國立勤益科技大學 | 利用三維深度學習之心臟超音波判斷模型之建立方法、利用三維深度學習之心臟超音波判斷系統及其方法 |
CN112168193B (zh) * | 2020-10-14 | 2024-04-23 | 北京赛迈特锐医疗科技有限公司 | 基于髌骨轴位x线图像获取髌骨解剖参数的***及方法 |
CN112614568B (zh) * | 2020-12-28 | 2024-05-28 | 东软集团股份有限公司 | 检查图像的处理方法、装置、存储介质和电子设备 |
CN114429649B (zh) * | 2022-04-07 | 2022-06-24 | 青岛美迪康数字工程有限公司 | 目标图像识别方法及装置 |
CN114782397B (zh) * | 2022-05-12 | 2022-12-23 | 中晗控股集团有限公司 | 基于医学图像和机器学习的人工智能肿瘤诊断*** |
CN115953555B (zh) * | 2022-12-29 | 2023-08-22 | 南京鼓楼医院 | 一种基于超声测量值的子宫腺肌病建模方法 |
CN116664580B (zh) * | 2023-08-02 | 2023-11-28 | 经智信息科技(山东)有限公司 | 一种ct图像的多图层级联成像方法及装置 |
CN116681717B (zh) * | 2023-08-04 | 2023-11-28 | 经智信息科技(山东)有限公司 | 一种ct图像的分割处理方法及装置 |
CN117059235A (zh) * | 2023-08-17 | 2023-11-14 | 经智信息科技(山东)有限公司 | 一种ct图像的自动渲染方法及装置 |
CN117575999B (zh) * | 2023-11-01 | 2024-04-16 | 广州盛安医学检验有限公司 | 一种基于荧光标记技术的病灶预测*** |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106204587A (zh) * | 2016-05-27 | 2016-12-07 | 孔德兴 | 基于深度卷积神经网络和区域竞争模型的多器官分割方法 |
WO2017048744A1 (en) * | 2015-09-18 | 2017-03-23 | University Of Pittsburgh-Of The Commonwealth System Of Higher Education | Automated segmentation of organs, such as kidneys, from magnetic resonance images |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7702153B2 (en) * | 2005-10-07 | 2010-04-20 | Siemens Medical Solutions Usa, Inc. | Systems and methods for segmenting object of interest from medical image |
US8837771B2 (en) * | 2012-02-28 | 2014-09-16 | Siemens Aktiengesellschaft | Method and system for joint multi-organ segmentation in medical image data using local and global context |
CN106780460B (zh) * | 2016-12-13 | 2019-11-08 | 杭州健培科技有限公司 | 一种用于胸部ct影像的肺结节自动检测*** |
CN106940816B (zh) * | 2017-03-22 | 2020-06-09 | 杭州健培科技有限公司 | 基于3d全卷积神经网络的ct图像肺结节检测*** |
CN107274402A (zh) * | 2017-06-27 | 2017-10-20 | 北京深睿博联科技有限责任公司 | 一种基于胸部ct影像的肺结节自动检测方法及*** |
CN107563123A (zh) * | 2017-09-27 | 2018-01-09 | 百度在线网络技术(北京)有限公司 | 用于标注医学图像的方法和装置 |
CN108364006B (zh) * | 2018-01-17 | 2022-03-08 | 超凡影像科技股份有限公司 | 基于多模式深度学习的医学图像分类装置及其构建方法 |
CN108510489B (zh) * | 2018-03-30 | 2021-08-03 | 四川元匠科技有限公司 | 一种基于深度学习的尘肺检测方法与*** |
CN108665456B (zh) * | 2018-05-15 | 2022-01-28 | 广州尚医网信息技术有限公司 | 基于人工智能的乳腺超声病灶区域实时标注的方法及*** |
-
2019
- 2019-06-18 CN CN201910527716.XA patent/CN110232383B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017048744A1 (en) * | 2015-09-18 | 2017-03-23 | University Of Pittsburgh-Of The Commonwealth System Of Higher Education | Automated segmentation of organs, such as kidneys, from magnetic resonance images |
CN106204587A (zh) * | 2016-05-27 | 2016-12-07 | 孔德兴 | 基于深度卷积神经网络和区域竞争模型的多器官分割方法 |
Also Published As
Publication number | Publication date |
---|---|
CN110232383A (zh) | 2019-09-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110232383B (zh) | 一种基于深度学习模型的病灶图像识别方法及病灶图像识别*** | |
EP3770850A1 (en) | Medical image identifying method, model training method, and computer device | |
CN108198184B (zh) | 造影图像中血管分割的方法和*** | |
US8761475B2 (en) | System and method for automatic recognition and labeling of anatomical structures and vessels in medical imaging scans | |
CN108171692B (zh) | 一种肺部影像检索方法及装置 | |
Liu et al. | A framework of wound segmentation based on deep convolutional networks | |
CN107563434B (zh) | 一种基于三维卷积神经网络的脑部mri图像分类方法、装置 | |
Nurmaini et al. | Accurate detection of septal defects with fetal ultrasonography images using deep learning-based multiclass instance segmentation | |
WO2020211530A1 (zh) | 用于检测眼底图片的模型训练方法和装置、眼底图片的检测方法和装置、计算机设备和介质 | |
CN112102266A (zh) | 基于注意力机制的脑梗死医学影像分类模型的训练方法 | |
CN113012173A (zh) | 基于心脏mri的心脏分割模型和病理分类模型训练、心脏分割、病理分类方法及装置 | |
CN113298830B (zh) | 一种基于自监督的急性颅内ich区域图像分割方法 | |
WO2021183765A1 (en) | Automated detection of tumors based on image processing | |
Wang et al. | Left atrial appendage segmentation based on ranking 2-D segmentation proposals | |
CN114332132A (zh) | 图像分割方法、装置和计算机设备 | |
CN116563533A (zh) | 基于目标位置先验信息的医学图像分割方法及*** | |
Liu et al. | Automated classification and measurement of fetal ultrasound images with attention feature pyramid network | |
CN112950552B (zh) | 一种基于卷积神经网络的肋骨分割标记方法及*** | |
CN113781403A (zh) | 一种胸部ct影像处理方法与装置 | |
Azli et al. | Ultrasound image segmentation using a combination of edge enhancement and kirsch’s template method for detecting follicles in ovaries | |
Delmoral et al. | Segmentation of pathological liver tissue with dilated fully convolutional networks: A preliminary study | |
CN112837283B (zh) | 一种肺栓塞检测***、介质及电子设备 | |
CN112862786B (zh) | Cta影像数据处理方法、装置及存储介质 | |
CN112862785B (zh) | Cta影像数据识别方法、装置及存储介质 | |
WO2022227193A1 (zh) | 肝脏区域分割方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CB03 | Change of inventor or designer information |
Inventor after: Do not announce the inventor Inventor before: Do not announce the inventor |
|
CB03 | Change of inventor or designer information |