CN107610121A - 一种肝脏统计形状模型初始位姿设定方法 - Google Patents
一种肝脏统计形状模型初始位姿设定方法 Download PDFInfo
- Publication number
- CN107610121A CN107610121A CN201710898011.XA CN201710898011A CN107610121A CN 107610121 A CN107610121 A CN 107610121A CN 201710898011 A CN201710898011 A CN 201710898011A CN 107610121 A CN107610121 A CN 107610121A
- Authority
- CN
- China
- Prior art keywords
- liver
- image
- riemann
- split
- shape model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种肝脏统计形状模型初始位姿设定方法,首先将待分割图像预处理获取二值图像,然后获取肝脏的形状网格模型并选取标志点,同时对另外若干组肝脏CT图像手动分割并进行表面网格化,得先验形状模型并选取标志点;以先验形状模型上的标志点作为训练集构建黎曼稀疏编码,然后进一步构建基于Stein散度的黎曼核函数,计算黎曼字典的最优解系数,然后利用更新后的待分割图像中标志点的空间位置关系,得到其相对于原始标志点位置的形变场,并将形变场映射到待分割图像形状模型中的每个顶点,实现初始位姿的设定。本发明能够实现肝脏统计形状模型的快速构建及初始位姿精确定位,提高了分割效率和精度,适用于肝实质、病灶的分割和识别。
Description
技术领域
本发明涉及CT图像的处理方法,具体的说是一种肝脏统计形状模型初始位姿设定方法。
背景技术
基于统计形状模型的分割方法是当今肝脏分割领域的研究热点。国内外研究学者针对此方法设计了不同的改进策略,但迄今为止,基于统计形状模型的肝脏分割方法依然存在亟待解决的问题:1)目前大多数统计形状模型的构建利用PCA降维,此种方法计算结果中对主成分的解释比较困难,且针对大数据先验形状模型的配准和降维而言,算法效率较低;2)统计模型在待分割图像中的初始位姿难以准确设定,虽然已有很多研究学者提出不同解决方案,但准确性依然有待提高。
初始位姿的设定是基于统计形状模型分割方法的一个难点,准确的初始定位能够减少模型的迭代次数,提高算法的运行效率及分割精度。在初始位姿的设定过程中,对应点信息对设定结果有着重要的影响,准确而充足的对应信息能够大大提高对齐的准确率。但现实中,对应点信息的获取非常困难,尽管目前出现了一些可以自适应寻找对应点信息的对齐算法,但这些方法需要大量的样本点,计算复杂度非常高,只能用于一些特定的情况或数据集。
发明内容
本发明的目的是提供一种肝脏统计形状模型初始位姿设定方法,以提高基于统计形状模型的肝脏分割精度,弥补现有方法中的一些不足之处。
本发明的目的是按如下的技术方案实现的。
一种肝脏统计形状模型初始位姿设定方法,包括以下步骤:
(1)将一组待分割的肝脏CT图像的原始图像进行预处理,获取包含有模糊肝脏边界的二值图像,然后利用Marching Cube算法将所得二值图像的模糊的肝脏边界进行表面网格化,获得待分割图像的肝脏的形状网格模型,之后在所获得的待分割图像的肝脏的形状网格模型上选取标志点;同时,
对若干组肝脏CT图像进行手动分割,然后同样利用Marching Cube算法将手动分割图像的肝脏边界进行表面网格化,获得先验形状模型,之后在各所获得的先验形状模型上选取标志点;
所述标志点的选取标准是肝脏的尖角和凹陷区域或者与其他组织连接紧密的区域;
(2)构建黎曼稀疏编码:以所述若干组先验形状模型上的标志点作为训练集,采用基于黎曼核的稀疏表示与字典学习方法构建黎曼稀疏编码;
(3)根据所构建的黎曼稀疏编码构建基于Stein散度的黎曼核函数;
(4)利用黎曼核函数计算黎曼字典的最优解系数,获取更新后的待分割图像中标志点的空间位置关系;
(5)利用所获取的更新后的待分割图像中标志点的空间位置关系,得到其相对于待分割图像的肝脏的形状网格模型的原始标志点位置的形变场,并将形变场映射到待分割图像的肝脏的形状网格模型中的每个顶点,实现初始位姿的设定。
所述的肝脏统计形状模型初始位姿设定方法,所述标志点的选取位置具体分别是:肝圆顶、右叶前段、右叶肝尖、右叶后段、莫里森袋、肝门和左叶侧段。
由于肝脏的形状变化非常复杂,传统方法通常利用主成分分析法对模型进行降维,容易导致肝脏的局部结构信息丢失;另外,通常利用图像的灰度信息设定统计形状模型的定初始位姿,容易造成初始位姿不准确,进而影响算法的分割精度和效率。本发明首次提出利用先验模型顶点的空间位置关系构建SPD流行结构,并构建基于Stein散度的黎曼核函数,进而设计一种基于黎曼核稀疏表示的方法进行形状重构,实现肝脏统计形状模型的快速构建及初始位姿精确定位,提高了分割效率和精度,非常适用于肝实质、病灶的分割和识别,为后续的肝脏疾病临床诊断和治疗计划的实施奠定基础。
附图说明
图1是本发明方法的工作流程简图。
图2是对待分割肝脏CT图像进行预处理的过程。
图2中:第1行给出的是CT数据的横断面,第2行给出的是同一数据的矢状面,而第3行给出的是冠状面;第1列~第6列分别给出的是原始图像、经过各向异性滤波的平滑图像、Gabor特征图像、梯度特征图像、局部阈值分割图像和连通域滤波的二值图像。
图3是根据原始图像所获取的待分割图像的肝脏的形状网格模型。
图4是标志点选取位置示意图。
图5是构建黎曼稀疏编码示意图。
图6稀疏统计形状模型在待分割图像上的初始位姿图。
具体实施方式
图1是本发明基于三维形变模型的肝脏分割方法流程图,本发明的方法具体包括以下几个步骤:
步骤1:图像预处理
(1)对一组待分割肝脏CT图像的原始图像(见图2中A1、B1、C1)进行各向异性滤波,得到平滑图像(见图2中A2、B2、C2),计算方法如下:
其中:
Jρ为原始图像的结构张量,表征原始图像的局部结构信息;D为以结构张量的特征值和特征向量为基础构建的扩散张量;为原始图像;为原始图像的梯度;
ISsmooth(x,y,z)为所得到的平滑图像,I0为原始图像的梯度图像,I0(x,y,z)为梯度图像的体素值,x、y、z为原始图像的三维坐标值。
(2)根据所得平滑图像获取Gabor特征图像(见图2中A3、B3、C3),计算公式如下:
IGabor(x,y,z)=[g(x',y',z').s(x,y,z)]ISmooth(x,y,z)
其中,IGabor(x,y,z)为Gabor特征图像,g(x′,y′,z′)为三维高斯函数,s(x,y,z)为复正弦函数;
①、g(x′,y′,z′)的计算方法为:
其中,(x′,y′,z′)为Gabor特征图像的三维坐标,(x′,y′,z′)T=R×(x,y,z)T表示高斯函数在空间中的旋转坐标,R为旋转矩阵;σx′、σy′和σz′分别为Gabor特征图像的各体素点在x,y和z方向上的标准差;
②、s(x,y,z)的计算方法为:
s(x,y,z)=exp(-j2π(ux+vy+wz)),
其中,j为变量,其值为1;ux为复正弦波在x方向的频率,vy为复正弦波在y方向的频率,wz为复正弦波在z方向的频率。
(3)根据所得平滑图像获取梯度特征图像(见图2中A4、B4、C4),计算公式如下:
其中,IGradient(x,y,z)为梯度特征图像,和分别是梯度特征图像在x、y和z轴方向的梯度;
本步骤,梯度特征图像的梯度方向为:
(4)最后按常规算法,根据所获取的平滑图像、Gabor特征图像和梯度特征图像进行灰度直方图统计,然后根据直方图获取肝脏区域的灰度信息,进而根据肝脏区域的灰度信息设定局部阈值获取局部阈值图像(见图2中A5、B5、C5),然后对局部阈值图像进行连通域滤波,获取包含有模糊肝脏边界的二值图像(见图2中A6、B6、C6)。
步骤2:获取网格模型
A、利用Marching Cube方法将步骤1所得包含有模糊肝脏边界的二值图像的模糊的肝脏边界进行表面网格化,获得待分割图像的肝脏的形状网格模型(如图3所示)。
B、另对21干组组肝脏CT图像进行手动分割,然后利用Marching Cube算法将该组手动分割的图像的肝脏边界进行表面网格化,得到先验形状模型。
步骤3:选取标志点
通过手动的方法,分别在步骤2-A所得待分割图像的肝脏的形状网格模型和步骤2-B所得先验形状模型上对肝脏的尖角和凹陷区域(即具有高曲率点或角点)或者与其他组织连接紧密的区域进行标志点选择,具体的,标志点的选取位置是(见图4):
肝圆顶(Hepatic Dome)、右叶前段(Right Lobe Anterior Seg)、右叶肝尖(RightLobe Tip)、右叶后段(Right Lobe Posterior Seg)、莫里森袋(Morrison Pouch)、肝门(Porta Hepatis)和左叶侧段(Left Lobe Lateral Seg)。
步骤4:构建黎曼稀疏编码
如图5所示,以先验形状模型上的标志点作为训练集,采用基于黎曼核的稀疏表示与字典学习方法构建黎曼稀疏编码,计算方法如下:
①、设X=[x1,x2,…,xm]T是21组先验形状模型上的标志点的几何结构(主要包括顶点与其邻域点距离和夹角信息)的特征矩阵,xi∈Rn(i=1,2,…,m)是各先验形状模型的特征向量描述子,则特征向量空间稀疏编码的目标函数为:
其中,lE(X,Bj)是特征向量空间稀疏编码目标函数,B=[b1,b2,…,bM]T是编码字典,λ是正则化参数,用于控制目标函数中前后两项的平衡关系,在本方法中此值选取为0.25。m为编码字典中元素的个数。ci为特征向量空间稀疏编码的系数矩阵。表示xi-ciB的2范数的平方。‖ci‖1为稀疏惩罚项,系数矩阵ci越稀疏,目标函数lE(X,Bj)值越小。因此,系数矩阵会朝更加稀疏的方向变化,经过多次迭代,就得到最终的稀疏编码。
②、在黎曼流行(M)上采用黎曼度量本方法中采用测地距离作为黎曼度量,则(M)上的稀疏编码目标函数就由步骤4-①的公式改写成:
其中:lM(X,B)是黎曼流行(M)稀疏编码目标函数,X∈M。Bj={B1,B2,…,BM}是黎曼字典,Bi∈M。cj=[c1,c2,…,cM]∈RM是该稀疏编码的系数矩阵,符号Θ、和□分别表示黎曼度量的减法、加法和内积。
步骤5:构建基于Stein散度的黎曼核函数
通过非线性映射Φ将对称正定流形映射到高维线性空间H,则利用步骤4-②中的黎曼稀疏编码公式得到H上的稀疏编码目标函数:
其中,lΦ(X,B)为高维线性空间H稀疏编码目标函数。
然后利用Stein散度S(Xi,Xj)=log|(Xi+Xj)/2|-log|XiXj|/2(式中,Xi、Xj分别表示两个先验形状模型上标志点的特征矩阵,log|*|表示对数函数)及再生核函数的特性K(Xi,Xj)=Φ(Xi)TΦ(Xj)可得:
其中K(X,B)=[K(X,B1),K(X,B2),…,K(X,Bm)],K(B,B)=[K(Bi,Bj)]M×M。
由此得到基于Stein散度的黎曼核函数。
步骤6:计算黎曼字典的最优解系数
(1)如待分割图像中包含非高斯噪声(即包含图像遮盖、像素点丢失等较大误差)时,可定义一个稀疏向量e∈Rn来表示模型的计算误差,则步骤5中高维线性空间H上的稀疏编码目标函数可进一步转化为:
其中,k2为e的稀疏度,若待分割图像中没有图像遮盖等误差时,e为零,即k2=0。
(2)将上式转化为1范数的形式进行求解,表达式如下:
其中,λ1和λ2分别为x和e的权重系数,本方法中λ1=λ2=0.25。
(3)然后,根据待分割图像中标志点的几何结构构建特征矩阵,利用K-SVD算法对本步骤(2)中的目标函数进行优化,迭代得到更新后的稀疏系数矩阵,进而利用此稀疏系数矩阵代替原始的待分割图像中标志点特征矩阵,即获取更新后的待分割图像中标志点的空间位置关系。
步骤7:实现初始位姿设定。
利用步骤6获取的更新后的待分割图像中标志点的空间位置关系,得到其相对于原始标志点位置的形变场,并将形变场映射到待分割图像形状模型中的每个顶点,实现初始位姿的设定,初始位姿设定结果如图6所示。
图6中,图A1~A4和图B1~B4分别是两组待分割图像的CT数据;图A1、B1是CT数据的横断面显示结果,图A2、B2是CT数据的矢状面显示结果,图A3、B3是CT数据的冠状面显示结果,图A4、B4是CT数据在三维空间的显示结果;各图中绿线表示待分割图像的真实肝脏边界,蓝色线表示利用本方法所构建的肝脏统计形状模型的初始位姿。
虽然参考优选实施例对本发明进行描述,但以上所述实例并不构成本发明保护范围的限定,任何在本发明的精神及原则内的修改、等同替换和改进等,均应包含在本发明的权利要求保护范围内。
Claims (2)
1.一种肝脏统计形状模型初始位姿设定方法,其特征是,包括以下步骤:
(1)将一组待分割的肝脏CT图像的原始图像进行预处理,获取包含有模糊肝脏边界的二值图像,然后利用Marching Cube算法将所得二值图像的模糊的肝脏边界进行表面网格化,获得待分割图像的肝脏的形状网格模型,之后在所获得的待分割图像的肝脏的形状网格模型上选取标志点;同时,
对若干组肝脏CT图像进行手动分割,然后同样利用Marching Cube算法将手动分割图像的肝脏边界进行表面网格化,获得先验形状模型,之后在各所获得的先验形状模型上选取标志点;
所述标志点的选取标准是肝脏的尖角和凹陷区域或者与其他组织连接紧密的区域;
(2)构建黎曼稀疏编码:以所述若干组先验形状模型上的标志点作为训练集,采用基于黎曼核的稀疏表示与字典学习方法构建黎曼稀疏编码;
(3)根据所构建的黎曼稀疏编码构建基于Stein散度的黎曼核函数;
(4)利用黎曼核函数计算黎曼字典的最优解系数,获取更新后的待分割图像中标志点的空间位置关系;
(5)利用所获取的更新后的待分割图像中标志点的空间位置关系,得到其相对于待分割图像的肝脏的形状网格模型的原始标志点位置的形变场,并将形变场映射到待分割图像的肝脏的形状模型中的每个顶点,实现初始位姿的设定。
2.根据权利要求1所述的肝脏统计形状模型初始位姿设定方法,其特征是,所述标志点的选取位置具体分别是:肝圆顶、右叶前段、右叶肝尖、右叶后段、莫里森袋、肝门和左叶侧段。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710898011.XA CN107610121B (zh) | 2017-09-28 | 2017-09-28 | 一种肝脏统计形状模型初始位姿设定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710898011.XA CN107610121B (zh) | 2017-09-28 | 2017-09-28 | 一种肝脏统计形状模型初始位姿设定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107610121A true CN107610121A (zh) | 2018-01-19 |
CN107610121B CN107610121B (zh) | 2019-11-15 |
Family
ID=61059081
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710898011.XA Active CN107610121B (zh) | 2017-09-28 | 2017-09-28 | 一种肝脏统计形状模型初始位姿设定方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107610121B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108961256A (zh) * | 2018-07-05 | 2018-12-07 | 艾瑞迈迪医疗科技(北京)有限公司 | 图像分割方法、手术导航设备、电子设备及存储介质 |
CN109741359A (zh) * | 2019-01-13 | 2019-05-10 | 中南大学 | 一种腹部ct序列图像病变肝脏分割方法 |
CN111402421A (zh) * | 2020-03-17 | 2020-07-10 | 上海志唐健康科技有限公司 | 肝脏三维重建方法、装置、计算机设备和存储介质 |
CN111815569A (zh) * | 2020-06-15 | 2020-10-23 | 广州视源电子科技股份有限公司 | 基于深度学习的图像分割方法、装置、设备和存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102760236A (zh) * | 2012-03-20 | 2012-10-31 | 苏州迪凯尔医疗科技有限公司 | 基于组合稀疏模型的先验形状建模方法 |
CN104318553A (zh) * | 2014-10-15 | 2015-01-28 | 北京理工大学 | 基于自适应表面形变模型的ct图像肝脏分割方法 |
CN105247572A (zh) * | 2012-10-05 | 2016-01-13 | 奥利亚医疗公司 | 用于通过借助对比剂的断层摄影来估计运动学***中的感兴趣量的***和方法 |
-
2017
- 2017-09-28 CN CN201710898011.XA patent/CN107610121B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102760236A (zh) * | 2012-03-20 | 2012-10-31 | 苏州迪凯尔医疗科技有限公司 | 基于组合稀疏模型的先验形状建模方法 |
CN105247572A (zh) * | 2012-10-05 | 2016-01-13 | 奥利亚医疗公司 | 用于通过借助对比剂的断层摄影来估计运动学***中的感兴趣量的***和方法 |
CN104318553A (zh) * | 2014-10-15 | 2015-01-28 | 北京理工大学 | 基于自适应表面形变模型的ct图像肝脏分割方法 |
Non-Patent Citations (3)
Title |
---|
ATSUSHI AAITO ET AL.: "Statistical shape model of a liver for autopsy imaging", 《INTERNATIONAL JOURNAL OF COMPUTER ASSISTED RADIOLOGY AND SURGERY》 * |
王雪虎: "结合形变优化与稀疏统计的CT图像肝脏分割方法研究", 《中国博士学位论文全文数据库 医药卫生科技辑》 * |
郭艳蓉: "医学图像分割与配准若干关键问题研究", 《中国博士学位论文全文数据库 信息科技辑》 * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108961256A (zh) * | 2018-07-05 | 2018-12-07 | 艾瑞迈迪医疗科技(北京)有限公司 | 图像分割方法、手术导航设备、电子设备及存储介质 |
CN109741359A (zh) * | 2019-01-13 | 2019-05-10 | 中南大学 | 一种腹部ct序列图像病变肝脏分割方法 |
CN109741359B (zh) * | 2019-01-13 | 2022-05-31 | 中南大学 | 一种腹部ct序列图像病变肝脏分割方法 |
CN111402421A (zh) * | 2020-03-17 | 2020-07-10 | 上海志唐健康科技有限公司 | 肝脏三维重建方法、装置、计算机设备和存储介质 |
CN111402421B (zh) * | 2020-03-17 | 2021-12-28 | 上海志唐健康科技有限公司 | 肝脏三维重建方法、装置、计算机设备和存储介质 |
CN111815569A (zh) * | 2020-06-15 | 2020-10-23 | 广州视源电子科技股份有限公司 | 基于深度学习的图像分割方法、装置、设备和存储介质 |
CN111815569B (zh) * | 2020-06-15 | 2024-03-29 | 广州视源电子科技股份有限公司 | 基于深度学习的图像分割方法、装置、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN107610121B (zh) | 2019-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111795704B (zh) | 一种视觉点云地图的构建方法、装置 | |
Sinha et al. | Deep learning 3D shape surfaces using geometry images | |
Tang et al. | An augmentation strategy for medical image processing based on statistical shape model and 3D thin plate spline for deep learning | |
US11514642B2 (en) | Method and apparatus for generating two-dimensional image data describing a three-dimensional image | |
CN107610121B (zh) | 一种肝脏统计形状模型初始位姿设定方法 | |
CN108052942B (zh) | 一种飞机飞行姿态的视觉图像识别方法 | |
CN109903396A (zh) | 一种基于曲面参数化的牙齿三维模型自动分割方法 | |
CN109903319B (zh) | 一种基于多分辨率的快速迭代最近点配准算法 | |
CN103218812B (zh) | 基于摄影测量的树木形态模型参数快速获取方法 | |
CN113111861A (zh) | 人脸纹理特征提取、3d人脸重建方法及设备及存储介质 | |
CN113570627B (zh) | 深度学习分割网络的训练方法及医学图像分割方法 | |
CN112862949B (zh) | 基于多视图的物体3d形状重建方法 | |
CN114022491B (zh) | 基于改进空间金字塔模型的小数据集食管癌肿瘤靶区影像自动勾画方法 | |
CN113436237B (zh) | 一种基于高斯过程迁移学习的复杂曲面高效测量*** | |
CN112163990B (zh) | 360度图像的显著性预测方法及*** | |
CN107220965A (zh) | 一种图像分割方法及*** | |
CN103700135B (zh) | 一种三维模型局部球面调和特征提取方法 | |
CN110570394A (zh) | 医学图像分割方法、装置、设备及存储介质 | |
CN115147709B (zh) | 一种基于深度学习的水下目标三维重建方法 | |
CN106548476A (zh) | 利用医学图像统计肺部三维特征形状方法 | |
CN114332070A (zh) | 一种基于智能学习网络模型压缩的陨坑检测方法 | |
CN113538221A (zh) | 三维人脸的处理方法、训练方法、生成方法、装置及设备 | |
CN116416376A (zh) | 一种三维头发的重建方法、***、电子设备及存储介质 | |
CN103366348B (zh) | 一种抑制x线图像中骨骼影像的方法及处理设备 | |
Liu et al. | 3-D prostate MR and TRUS images detection and segmentation for puncture biopsy |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |