CN110279429B - 四维超声重建方法及装置 - Google Patents

四维超声重建方法及装置 Download PDF

Info

Publication number
CN110279429B
CN110279429B CN201910510059.8A CN201910510059A CN110279429B CN 110279429 B CN110279429 B CN 110279429B CN 201910510059 A CN201910510059 A CN 201910510059A CN 110279429 B CN110279429 B CN 110279429B
Authority
CN
China
Prior art keywords
dimensional
respiratory
dimensional image
images
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910510059.8A
Other languages
English (en)
Other versions
CN110279429A (zh
Inventor
杨健
王涌天
范敬凡
武潺
李静舒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Technology BIT
Original Assignee
Beijing Institute of Technology BIT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Technology BIT filed Critical Beijing Institute of Technology BIT
Priority to CN201910510059.8A priority Critical patent/CN110279429B/zh
Publication of CN110279429A publication Critical patent/CN110279429A/zh
Application granted granted Critical
Publication of CN110279429B publication Critical patent/CN110279429B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/483Diagnostic techniques involving the acquisition of a 3D volume of data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • A61B8/5246Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from the same or different imaging techniques, e.g. color Doppler and B-mode

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Radiology & Medical Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

本发明实施例提供一种四维超声重建方法及装置,其中该方法包括:获取目标三维器官不同横截面位置处的第一二维图像序列及其分别对应的呼吸信号,并将所有呼吸信号分成多个分组,对应多个呼吸状态;基于各二维图像分别对应的呼吸信号,提取各第一二维图像序列中对应各呼吸状态的二维图像,以分别针对各呼吸状态,构成对应的第二二维图像序列;对于每一呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有呼吸状态进行排列,基于所有三维体数据图像,重构四维超声图像进行展示。本发明实施例能够有效提高四维成像的成功率和成像的图像质量,并能有效降低成本。

Description

四维超声重建方法及装置
技术领域
本发明涉及超声图像处理技术领域,更具体地,涉及一种四维超声重建方法及装置。
背景技术
四维(four-dimensional,4D)成像的发展为研究者和医学界提供了三维器官的呼吸运动,即4D成像能根据不同呼吸状态下器官的三维图像,组成一个具有三维运动的4D(3D+t)图像序列,如4D核磁共振成像(MRI)、4D计算机断层扫描(CT)等。
在4D成像中,MR/CT具有高分辨率成像的能力使得组织结构变得清晰,通过将人体内部的三维呼吸运动可视化,能更好的辅助研究者掌握器官运动的规律。但是,这两种成像方法除了数据采集过程漫长外,CT成像过程中会产生大量的辐射,造成辐射污染,而MR成像则成本较高,相对昂贵。
近年来,超声以其实时性强、安全性高和低成本的特征在4D成像技术中得到了广泛的应用。目前,主要根据3D US图像来进行4D成像处理,而3D US探头可以提取到实时性较好的3D US图像。但是,所获取的3D US图像视野有限、分辨率低,且具有高声阻抗的结构会导致遮挡,导致图像采集不完全,从而会严重影响4D成像的成功率和图像质量。此外,3D US探头的价格昂贵,成本较高。
发明内容
为了克服上述问题或者至少部分地解决上述问题,本发明实施例提供一种四维超声重建方法及装置,用以有效提高四维成像的成功率和成像的图像质量,并有效降低成本。
第一方面,本发明实施例提供一种四维超声重建方法,包括:
获取目标三维器官不同横截面位置处的第一二维图像序列以及各所述第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有所述呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态;
基于各所述第一二维图像序列中各二维图像分别对应的呼吸信号,提取各所述第一二维图像序列中对应各所述呼吸状态的二维图像,以分别针对各所述呼吸状态,构成对应的第二二维图像序列;
对于每一所述呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有所述呼吸状态进行排列,基于所有所述三维体数据图像,重构所述目标三维器官的四维超声图像进行展示。
第二方面,本发明实施例提供一种四维超声重建装置,包括:
数据获取模块,用于获取目标三维器官不同横截面位置处的第一二维图像序列以及各所述第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有所述呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态;
图像提取模块,用于基于各所述第一二维图像序列中各二维图像分别对应的呼吸信号,提取各所述第一二维图像序列中对应各所述呼吸状态的二维图像,以分别针对各所述呼吸状态,构成对应的第二二维图像序列;
重构展示模块,用于对于每一所述呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有所述呼吸状态进行排列,基于所有所述三维体数据图像,重构所述目标三维器官的四维超声图像进行展示。
第三方面,本发明实施例提供一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如上第一方面所述的四维超声重建方法的步骤。
第四方面,本发明实施例提供一种非暂态计算机可读存储介质,其上存储有计算机指令,所述计算机指令被计算机执行时,实现如上第一方面所述的四维超声重建方法的步骤。
本发明实施例提供的四维超声重建方法及装置,通过采集目标三维器官不同横截面位置处的二维图像和各二维图像对应的呼吸信号,并针对呼吸信号将二维图像进行重新划分构成新的二维图像序列,最后通过对每个呼吸状态下的所有二维图像进行三维重构并对所有呼吸状态进行排列,实现目标三维器官的四维超声图像的准确重构与展示,能够有效提高四维成像的成功率和成像的图像质量,并能有效降低成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的四维超声重建方法的流程示意图;
图2为本发明另一实施例提供的四维超声重建方法的流程示意图;
图3为根据图2所示四维超声重建方法流程中数据处理及图像分类的流程示意图;
图4为本发明实施例提供的四维超声重建装置的结构示意图;
图5为本发明实施例提供的电子设备的实体结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明实施例的一部分实施例,而不是全部的实施例。基于本发明实施例中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明实施例保护的范围。
本发明实施例针对现有技术中4D成像的成功率和图像质量不高且成本较高的问题,通过采集目标三维器官不同横截面位置处的二维图像和各二维图像对应的呼吸信号,并针对呼吸信号将二维图像进行重新划分构成新的二维图像序列,最后通过对每个呼吸状态下的所有二维图像进行三维重构并对所有呼吸状态进行排列,实现目标三维器官的四维超声图像的准确重构与展示,能够有效提高四维成像的成功率和成像的图像质量,并能有效降低成本。以下将具体通过多个实施例对本发明实施例进行展开说明和介绍。
图1为本发明一实施例提供的四维超声重建方法的流程示意图,如图1所示,该方法包括:
S101,获取目标三维器官不同横截面位置处的第一二维图像序列以及各第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态。
具体而言,本发明实施例对目标三维器官多个不同横截面位置处的数据分别进行采集和获取,其中采集的数据包括横截面处的二维图像和采集各二维图像时对应的呼吸信号。对于同一个横截面位置,可以连续多次采集多个二维图像,这些二维图像以同一横截面为基础构成一个二维图像序列,即为第一二维图像序列。则,对于多个不同横截面位置,可对应获取多个不同的第一二维图像序列和第一二维图像序列中各二维图像对应的呼吸信号。
之后,将所有第一二维图像序列中所有二维图像对应的呼吸信号按照信号值的大小进行分组,则每个分组实际对应一个呼吸阶段,于是将每个呼吸阶段设定为一个特定的呼吸状态。例如,可以将所有呼吸信号按照从小到大的顺序进行排列,获取其中的最大、最小值,然后按照均等的呼吸信号间隔或者均等的呼吸信号数量,将所有呼吸信号分成设定多个呼吸阶段,每个呼吸阶段对应一个特定的呼吸状态。
S102,基于各第一二维图像序列中各二维图像分别对应的呼吸信号,提取各第一二维图像序列中对应各呼吸状态的二维图像,以分别针对各呼吸状态,构成对应的第二二维图像序列。
可以理解为,在对所有呼吸信号进行分组获取多个呼吸状态的基础上,本发明实施例根据各个第一二维图像序列中二维图像的呼吸信号所属的呼吸阶段,将各个第一二维图像序列中分别对应各个呼吸状态的二维图像提取出来,则在每个呼吸状态下,将包含多个二维图像。于是,以每个呼吸状态为基础,可分别将各呼吸状态下的多个二维图像各构成一个新的图像序列,即为第二二维图像序列。可以理解,通过第一二维图像序列向第二二维图像序列的转化,使得图像序列由基于不同位置划分转为基于不同呼吸状态划分,即实现了将具有同一呼吸状态的不同横截面位置处的二维图像进行聚类。
S103,对于每一呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有呼吸状态进行排列,基于所有三维体数据图像,重构目标三维器官的四维超声图像进行展示。
可以理解为,本步骤在上述转换的基础上,利用每个呼吸状态下的所有二维图像进行相应呼吸状态下的三维超声图像重构,重构获取的三维超声图像即为相应呼吸状态下的三维体数据图像。例如,对于呼吸状态i,其对应有一个第二二维图像序列,其中包含在呼吸状态i时采集的目标三维器官不同横截面位置处的多个二维图像,则可利用这些二维图像重构三维超声图像,重构所得的三维超声图像即为呼吸状态i下的三维体数据图像。
于是,对应每个呼吸状态,将分别得到一个对应的三维体数据图像。最后,通过对所有呼吸状态按照大小进行排列,得到一个有序的排列,同时,将对应各呼吸状态的三维体数据图像按照相应的顺序进行排列,最终得到一个包含呼吸状态信息的四维超声图像即为重构得到的目标三维器官的四维超声图像,之后将该四维超声图像利用相关显示设备进行四维展示即可。
本发明实施例提供的四维超声重建方法,通过采集目标三维器官不同横截面位置处的二维图像和各二维图像对应的呼吸信号,并针对呼吸信号将二维图像进行重新划分构成新的二维图像序列,最后通过对每个呼吸状态下的所有二维图像进行三维重构并对所有呼吸状态进行排列,实现目标三维器官的四维超声图像的准确重构与展示,能够有效提高四维成像的成功率和成像的图像质量,并能有效降低成本。
其中,根据上述各实施例可选的,提取各第一二维图像序列中对应各呼吸状态的二维图像的步骤具体包括:对于每一第一二维图像序列,基于该第一二维图像序列中各二维图像分别对应的呼吸信号,确定各二维图像所属的呼吸状态;对于任一呼吸状态,通过进行该呼吸状态下第一横截面位置处的二维图像与该呼吸状态下相邻下一横截面位置处的所有二维图像的相似性计算,提取出第一横截面位置处具有最大相似度的二维图像,作为对应该呼吸状态的二维图像。
具体而言,本发明实施例分别针对每个横截面位置处的第一二维图像序列进行处理,提取其中对应各个不同呼吸状态的二维图像。从第一个横截面位置开始,将当前处理的横截面位置定义为第一横截面位置,则对于第一横截面位置处的第一二维图像序列,通过判断其中的二维图像对应的呼吸信号所属的呼吸阶段,来确定对应二维图像与该所属呼吸阶段的对应关系,也即确定对应二维图像与该呼吸阶段(对应呼吸状态)的所属关系。
于是,对于每个呼吸状态,其下对应每个横截面位置均包含多个二维图像,以其中一个呼吸状态i为例,在第一横截面位置处取出各呼吸状态的二维图像之后,利用呼吸状态i在第一横截面位置的2D US图像与下一个相邻位置处该呼吸状态i的所有二维图像进行相似性测度的计算,提取出第一横截面位置处所有二维图像中相似性计算结果相似度最高的二维图像,作为该位置处呼吸状态i下用于四维超声图像重建的图像。
其中可选的,具体可采用L2范数计算法,进行相似性计算,具体计算公式如下:
Figure BDA0002093161040000071
式中,
Figure BDA0002093161040000072
表示
Figure BDA0002093161040000073
Figure BDA0002093161040000074
的L2范数,
Figure BDA0002093161040000075
表示呼吸状态i下第一横截面位置处的二维图像,i=1,2,...,n,n表示分组的总数,
Figure BDA0002093161040000076
表示呼吸状态i下相邻下一横截面位置处的二维图像,j=1,2,...,k,k表示相邻下一横截面位置处第一二维图像序列中属于呼吸状态i的二维图像的总数。
本发明实施例根据相邻位置图像具有相似性的理念,在利用呼吸信号识别US图像所处呼吸阶段的前提下,再通过计算相邻图像之间的相似性,对当前位置的二维图像进行精确筛选,使得体数据中组织边界出现不连续的现象得到明显改善。
其中可选的,也可采用以下处理流程提取各第一二维图像序列中对应各呼吸状态的二维图像:首先,针对每个分组的呼吸状态,基于该分组的所有呼吸信号的信号值,求取该分组呼吸状态对应的平均信号值;其次,对于任一第一二维图像序列,基于该第一二维图像序列中各二维图像分别对应的呼吸信号,确定各二维图像所属的呼吸状态;最后,对于任一呼吸状态,通过计算该呼吸状态下各二维图像对应的呼吸信号与平均信号值的接近程度,选取出呼吸信号值最接***均信号值的二维图像,作为对应该呼吸状态的二维图像。
也就是说,本发明实施例是以统计平均值为参考,来选取每个第一二维图像序列中相应的二维图像来进行各呼吸状态下三维体数据重建。具体而言,对于每个呼吸状态也即呼吸阶段,对信号值处于该阶段的所有呼吸信号求取平均值,该平均值即可作为该呼吸阶段的平均信号值。之后,对于每个第一二维图像序列而言,通过判断其中的二维图像的呼吸信号所属的呼吸阶段,来确定对应二维图像与该呼吸阶段的对应关系,也即确定对应二维图像与该呼吸阶段的所属关系。于是,对于每个呼吸状态,其下对应每个横截面位置均包含多个二维图像。最后,对于每个呼吸状态,将其下对应每个横截面位置的多个二维图像的呼吸信号与上述求取的该呼吸状态的平均信号值分别比较接近程度,将呼吸信号值最接近呼吸阶段平均信号值的二维图像提取出来,用于该呼吸阶段的三维体数据重建。
进一步的,在将所有呼吸信号按照信号值的大小分成多个分组的步骤之前,本发明实施例的四维超声重建方法还可以包括:对所有呼吸信号进行直方图统计,获取所有呼吸信号的有效上边界和有效下边界,并通过比较所有呼吸信号与有效上边界和有效下边界的值的大小,剔除异常呼吸信号以及异常呼吸信号对应的二维图像;相应的,将剔除异常呼吸信号之后的所有呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态。
可以理解为,由于在采集二维图像的过程中难免会发生被采集对象移动的现象,使得采集的呼吸信号值范围超过正常呼吸运动移动的范围,因此本发明实施例事先对获取的所有呼吸信号进行直方图统计,并根据统计结果移除带有非正常移动的异常呼吸信号值。
其中可选的,获取目标三维器官不同横截面位置处的第一二维图像序列以及各第一二维图像序列中各二维图像分别对应的呼吸信号的步骤具体包括:对于任一横截面位置,控制二维超声探头在该横截面位置处采集一组具有2或3个呼吸运动周期的目标三维器官横截面超声序列图像,作为第一二维图像序列,并利用电磁跟踪法,通过跟踪预设在目标三维器官上的标记点,获取第一二维图像序列中各二维图像分别对应的呼吸信号。
可以理解为,本发明实施例利用机械臂采集目标器官不同横截面部位2D US序列,具体采用机械臂控制普通二维超声探头来采集所需的二维图像数据。如对目标三维器官沿给定方向顺序遍历每个横截面位置,机械臂控制二维超声探头自上而下的移动,每次移动1mm的间隔。具体在每次移动二维超声探头时,可控制采集过程中超声序列图像平面之间保持平行,且二维超声探头保持在一条垂直在超声平面的直线上移动。
在每次移动二维超声探头之前,超声探头在当前位置采集一组具有2或3个呼吸运动周期的目标器官横截面超声序列图像,同时利用电磁跟踪法跟踪位于设定位置的标记点以获取该图像序列的呼吸信号,采集完毕后机械臂控制超声探头下移以采集下一组图像序列。
在每移动二维超声探头到一个新的横截面位置处后,重复执行上述数据采集步骤,直至数据采集遍历整个目标三维器官,获取所有第一二维图像序列以及各第一二维图像序列中各二维图像分别对应的呼吸信号。
为进一步说明本发明实施例的技术方案,本发明实施例根据上述各实施例提供如下具体的处理流程,但不对本发明实施例的保护范围进行限制。
图2为本发明另一实施例提供的四维超声重建方法的流程示意图,
图3为根据图2所示四维超声重建方法流程中数据处理及图像分类的流程示意图,如图2和图3所示,该方法包括:
首先,通过数据采集获得各部位2D US序列{I1,...,IN}及其对应的呼吸信号集合{S1,...,SN},对所有呼吸信号进行直方图统计获得呼吸信号值的上下边界以排除异常值。
其次,根据呼吸信号集合{S1,...,SN}获得呼吸信号的上下边界,作为分段的最大最小值,并根据获得的最大最小值将各个横截面位置在该区间中的呼吸信号分为15个呼吸阶段,每个呼吸阶段中的图像表示具有相同的呼吸状态。
再次,对于第一组二维图像序列I1,将呼吸信号值最接近呼吸阶段平均值的图像提取出来,用于该呼吸阶段的三维体数据重建。
具体在第一个横截面位置处,取出各呼吸阶段的二维图像之后,利用呼吸阶段i(也即呼吸状态i)在横截面位置1的2D US图像I1 i与相邻下一个横截面位置处该呼吸阶段i的所有图像进行相似性测度的计算,计算公式利用L2范数如下:
Figure BDA0002093161040000101
式中,
Figure BDA0002093161040000102
表示
Figure BDA0002093161040000103
Figure BDA0002093161040000104
的L2范数,
Figure BDA0002093161040000105
表示呼吸状态i下第一横截面位置处的二维图像,i=1,2,...,15,
Figure BDA0002093161040000106
表示呼吸状态i下相邻下一横截面位置处的二维图像,j=1,2,...,k,k表示所述相邻下一横截面位置处第一二维图像序列中属于呼吸状态i的二维图像的总数。
之后,提取出第一横截面位置处呼吸状态i下所有二维图像中具有最小L2范数值的图像,作为该位置呼吸阶段i中用于思维超声图像重建的图像。
重复上述处理过程,对每个横截面位置处进行相同呼吸节点图像的提取,直至所有横截面位置的图像提取完毕。
最后,将提取出的各个呼吸阶段的图像序列分别生成3D US图像,并根据呼吸信号值排列,获取半个周期内的4D US图像进行展示。
本发明实施例结合了图像信息与呼吸信号进行4D US重建,使得体数据中组织边界出现不连续的现象得到明显改善。同时,使用普通2D超声探头获得4D超声数据,并利用2D超声序列重建4D超声数据,使得该4D超声图像具有大视角、高质量,有效的补偿了3D US探头的缺陷。
基于相同的构思,本发明实施例根据上述各实施例提供一种四维超声重建装置,该装置用于在上述各实施例中实现四维超声重建。因此,在上述各实施例的四维超声重建方法中的描述和定义,可以用于本发明实施例中各个执行模块的理解,具体可参考上述实施例,此处不在赘述。
根据本发明实施例的一个实施例,四维超声重建装置的结构如图4所示,为本发明实施例提供的四维超声重建装置的结构示意图,该装置可以用于实现上述各方法实施例中四维超声重建,该装置包括:数据获取模块401、图像提取模块402和重构展示模块403。其中:
数据获取模块401用于获取目标三维器官不同横截面位置处的第一二维图像序列以及各第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态;图像提取模块402用于基于各第一二维图像序列中各二维图像分别对应的呼吸信号,提取各第一二维图像序列中对应各呼吸状态的二维图像,以分别针对各呼吸状态,构成对应的第二二维图像序列;重构展示模块403用于对于每一呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有呼吸状态进行排列,基于所有三维体数据图像,重构目标三维器官的四维超声图像进行展示。
具体而言,数据获取模块401对目标三维器官多个不同横截面位置处的数据分别进行采集和获取,其中采集的数据包括横截面处的二维图像和采集各二维图像时对应的呼吸信号。对于同一个横截面位置,数据获取模块401可以连续多次采集多个二维图像,这些二维图像以同一横截面为基础构成一个二维图像序列,即为第一二维图像序列。则,对于多个不同横截面位置,可对应获取多个不同的第一二维图像序列和第一二维图像序列中各二维图像对应的呼吸信号。
之后,数据获取模块401将所有第一二维图像序列中所有二维图像对应的呼吸信号按照信号值的大小进行分组,则每个分组实际对应一个呼吸阶段,于是将每个呼吸阶段设定为一个特定的呼吸状态。例如,数据获取模块401可以将所有呼吸信号按照从小到大的顺序进行排列,获取其中的最大、最小值,然后按照均等的呼吸信号间隔或者均等的呼吸信号数量,将所有呼吸信号分成设定多个呼吸阶段,每个呼吸阶段对应一个特定的呼吸状态。
再之后,图像提取模块402根据各个第一二维图像序列中二维图像的呼吸信号所属的呼吸阶段,将各个第一二维图像序列中分别对应各个呼吸状态的二维图像提取出来,则在每个呼吸状态下,将包含多个二维图像。于是,以每个呼吸状态为基础,图像提取模块402可分别将各呼吸状态下的多个二维图像各构成一个新的图像序列,即为第二二维图像序列。可以理解,通过第一二维图像序列向第二二维图像序列的转化,使得图像序列由基于不同位置划分转为基于不同呼吸状态划分,即实现了将具有同一呼吸状态的不同横截面位置处的二维图像进行聚类。
最后,重构展示模块403利用每个呼吸状态下的所有二维图像进行该呼吸状态下的三维超声图像重构,重构获取的三维超声图像即为相应呼吸状态下的三维体数据图像。于是,对应每个呼吸状态将分别得到一个对应的三维体数据图像。之后,重构展示模块403通过对所有呼吸状态进行排列,得到一个有序的排列,同时,将对应各呼吸状态的三维体数据图像按照相应的顺序进行排列,最终得到一个包含呼吸状态信息的四维超声图像即为重构得到的目标三维器官的四维超声图像,将该四维超声图像利用相关显示设备进行四维展示即可。
本发明实施例提供的四维超声重建装置,通过设置相应的执行模块,采集目标三维器官不同横截面位置处的二维图像和各二维图像对应的呼吸信号,并针对呼吸信号将二维图像进行重新划分构成新的二维图像序列,最后通过对每个呼吸状态下的所有二维图像进行三维重构并对所有呼吸状态进行排列,实现目标三维器官的四维超声图像的准确重构与展示,能够有效提高四维成像的成功率和成像的图像质量,并能有效降低成本。
可以理解的是,本发明实施例中可以通过硬件处理器(hardwareprocessor)来实现上述各实施例的装置中的各相关程序模块。并且,本发明实施例的四维超声重建装置利用上述各程序模块,能够实现上述各方法实施例的四维超声重建流程,在用于实现上述各方法实施例中四维超声重建时,本发明实施例的装置产生的有益效果与对应的上述各方法实施例相同,可以参考上述各方法实施例,此处不再赘述。
作为本发明实施例的又一个方面,本实施例根据上述各实施例提供一种电子设备,该电子设备包括存储器、处理器及存储在该存储器上并可在该处理器上运行的计算机程序,该处理器执行该计算机程序时,实现如上述各实施例的四维超声重建方法的步骤。
进一步的,本发明实施例的电子设备还可以包括通信接口和总线。参考图5,为本发明实施例提供的电子设备的实体结构示意图,包括:至少一个存储器501、至少一个处理器502、通信接口503和总线504。
其中,存储器501、处理器502和通信接口503通过总线504完成相互间的通信,通信接口503用于该电子设备与二维超声图像设备之间的信息传输;存储器501中存储有可在处理器502上运行的计算机程序,处理器502执行该计算机程序时,实现如上述各实施例所述的四维超声重建方法的步骤。
可以理解为,该电子设备中至少包含存储器501、处理器502、通信接口503和总线504,且存储器501、处理器502和通信接口503通过总线504形成相互间的通信连接,并可完成相互间的通信,如处理器502从存储器501中读取四维超声重建方法的程序指令等。另外,通信接口503还可以实现该电子设备与二维超声图像设备之间的通信连接,并可完成相互间信息传输,如通过通信接口503实现四维超声重建等。
电子设备运行时,处理器502调用存储器501中的程序指令,以执行上述各方法实施例所提供的方法,例如包括:获取目标三维器官不同横截面位置处的第一二维图像序列以及各第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态;基于各第一二维图像序列中各二维图像分别对应的呼吸信号,提取各第一二维图像序列中对应各呼吸状态的二维图像,以分别针对各呼吸状态,构成对应的第二二维图像序列;对于每一呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有呼吸状态进行排列,基于所有三维体数据图像,重构目标三维器官的四维超声图像进行展示等。
上述的存储器501中的程序指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。或者,实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本发明实施例还根据上述各实施例提供一种非暂态计算机可读存储介质,其上存储有计算机指令,该计算机指令被计算机执行时,实现如上述各实施例所述的四维超声重建方法的步骤,例如包括:获取目标三维器官不同横截面位置处的第一二维图像序列以及各第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态;基于各第一二维图像序列中各二维图像分别对应的呼吸信号,提取各第一二维图像序列中对应各呼吸状态的二维图像,以分别针对各呼吸状态,构成对应的第二二维图像序列;对于每一呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有呼吸状态进行排列,基于所有三维体数据图像,重构目标三维器官的四维超声图像进行展示等。
本发明实施例提供的电子设备和非暂态计算机可读存储介质,通过执行上述各实施例所述的四维超声重建方法,采集目标三维器官不同横截面位置处的二维图像和各二维图像对应的呼吸信号,并针对呼吸信号将二维图像进行重新划分构成新的二维图像序列,最后通过对每个呼吸状态下的所有二维图像进行三维重构并对所有呼吸状态进行排列,实现目标三维器官的四维超声图像的准确重构与展示,能够有效提高四维成像的成功率和成像的图像质量,并能有效降低成本。
可以理解的是,以上所描述的装置、电子设备及存储介质的实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,既可以位于一个地方,或者也可以分布到不同网络单元上。可以根据实际需要选择其中的部分或全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上实施方式的描述,本领域的技术人员可以清楚地了解,各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如U盘、移动硬盘、ROM、RAM、磁碟或者光盘等,包括若干指令,用以使得一台计算机设备(如个人计算机,服务器,或者网络设备等)执行上述各方法实施例或者方法实施例的某些部分所述的方法。
另外,本领域内的技术人员应当理解的是,在本发明实施例的申请文件中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本发明实施例的说明书中,说明了大量具体细节。然而应当理解的是,本发明实施例的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。类似地,应当理解,为了精简本发明实施例公开并帮助理解各个发明方面中的一个或多个,在上面对本发明实施例的示例性实施例的描述中,本发明实施例的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。
然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明实施例要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明实施例的单独实施例。
最后应说明的是:以上实施例仅用以说明本发明实施例的技术方案,而非对其限制;尽管参照前述实施例对本发明实施例进行了详细的说明,本领域的技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明实施例各实施例技术方案的精神和范围。

Claims (8)

1.一种四维超声重建方法,其特征在于,包括:
获取目标三维器官不同横截面位置处的第一二维图像序列以及各所述第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有所述呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态;
基于各所述第一二维图像序列中各二维图像分别对应的呼吸信号,提取各所述第一二维图像序列中对应各所述呼吸状态的二维图像,以分别针对各所述呼吸状态,构成对应的第二二维图像序列;
对于每一所述呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有所述呼吸状态进行排列,基于所有所述三维体数据图像,重构所述目标三维器官的四维超声图像进行展示;其中,所述提取各所述第一二维图像序列中对应各所述呼吸状态的二维图像的步骤具体包括:
对于每一所述第一二维图像序列,基于该第一二维图像序列中各二维图像分别对应的呼吸信号,确定各所述二维图像所属的呼吸状态;
对于任一所述呼吸状态,通过进行该呼吸状态下第一横截面位置处的二维图像与该呼吸状态下相邻下一横截面位置处的所有二维图像的相似性计算,提取出所述第一横截面位置处具有最大相似度的二维图像,作为对应该呼吸状态的二维图像;
或,所述提取各所述第一二维图像序列中对应各所述呼吸状态的二维图像的步骤具体包括:
针对每个所述分组的呼吸状态,基于该分组的所有呼吸信号的信号值,求取该分组呼吸状态对应的平均信号值;
对于任一所述第一二维图像序列,基于该第一二维图像序列中各二维图像分别对应的呼吸信号,确定各所述二维图像所属的呼吸状态;
对于任一所述呼吸状态,通过计算该呼吸状态下各所述二维图像对应的呼吸信号与所述平均信号值的接近程度,选取出呼吸信号值最接近所述平均信号值的二维图像,作为对应该呼吸状态的二维图像。
2.根据权利要求1所述的四维超声重建方法,其特征在于,具体采用L2范数计算法,进行所述相似性计算,具体计算公式如下:
Figure FDA0002741801020000021
式中,
Figure FDA0002741801020000022
表示
Figure FDA0002741801020000023
Figure FDA0002741801020000024
的L2范数,
Figure FDA0002741801020000025
表示呼吸状态i下第一横截面位置处的二维图像,i=1,2,...,n,n表示所述分组的总数,
Figure FDA0002741801020000026
表示呼吸状态i下相邻下一横截面位置处的二维图像,j=1,2,...,k,k表示所述相邻下一横截面位置处第一二维图像序列中属于呼吸状态i的二维图像的总数。
3.根据权利要求1-2中任一项所述的四维超声重建方法,其特征在于,在所述将所有所述呼吸信号按照信号值的大小分成多个分组的步骤之前,还包括:
对所有所述呼吸信号进行直方图统计,获取所有呼吸信号的有效上边界和有效下边界,并通过比较所有所述呼吸信号与所述有效上边界和有效下边界的值的大小,剔除异常呼吸信号以及所述异常呼吸信号对应的二维图像;
相应的,将剔除异常呼吸信号之后的所有呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态。
4.根据权利要求1所述的四维超声重建方法,其特征在于,所述获取目标三维器官不同横截面位置处的第一二维图像序列以及各所述第一二维图像序列中各二维图像分别对应的呼吸信号的步骤具体包括:
对于任一所述横截面位置,控制二维超声探头在该横截面位置处采集一组具有2或3个呼吸运动周期的目标三维器官横截面超声序列图像,作为所述第一二维图像序列,并利用电磁跟踪法,通过跟踪预设在所述目标三维器官上的标记点,获取所述第一二维图像序列中各二维图像分别对应的呼吸信号。
5.根据权利要求4所述的四维超声重建方法,其特征在于,所述控制二维超声探头的步骤具体包括:
控制采集过程中超声序列图像平面之间保持平行,且所述二维超声探头保持在垂直于超声平面的直线上移动。
6.一种四维超声重建装置,其特征在于,包括:
数据获取模块,用于获取目标三维器官不同横截面位置处的第一二维图像序列以及各所述第一二维图像序列中各二维图像分别对应的呼吸信号,并将所有所述呼吸信号按照信号值的大小分成多个分组,每个分组对应一个呼吸状态;
图像提取模块,用于基于各所述第一二维图像序列中各二维图像分别对应的呼吸信号,提取各所述第一二维图像序列中对应各所述呼吸状态的二维图像,以分别针对各所述呼吸状态,构成对应的第二二维图像序列;
重构展示模块,用于对于每一所述呼吸状态,基于该呼吸状态对应的第二二维图像序列,重构该呼吸状态下的三维体数据图像,并通过对所有所述呼吸状态进行排列,基于所有所述三维体数据图像,重构所述目标三维器官的四维超声图像进行展示;
其中,所述提取各所述第一二维图像序列中对应各所述呼吸状态的二维图像具体包括:
对于每一所述第一二维图像序列,基于该第一二维图像序列中各二维图像分别对应的呼吸信号,确定各所述二维图像所属的呼吸状态;
对于任一所述呼吸状态,通过进行该呼吸状态下第一横截面位置处的二维图像与该呼吸状态下相邻下一横截面位置处的所有二维图像的相似性计算,提取出所述第一横截面位置处具有最大相似度的二维图像,作为对应该呼吸状态的二维图像。
7.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时,实现如权利要求1至5中任一项所述的四维超声重建方法的步骤。
8.一种非暂态计算机可读存储介质,其上存储有计算机指令,其特征在于,所述计算机指令被计算机执行时,实现如权利要求1至5中任一项所述的四维超声重建方法的步骤。
CN201910510059.8A 2019-06-13 2019-06-13 四维超声重建方法及装置 Active CN110279429B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910510059.8A CN110279429B (zh) 2019-06-13 2019-06-13 四维超声重建方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910510059.8A CN110279429B (zh) 2019-06-13 2019-06-13 四维超声重建方法及装置

Publications (2)

Publication Number Publication Date
CN110279429A CN110279429A (zh) 2019-09-27
CN110279429B true CN110279429B (zh) 2021-02-09

Family

ID=68004740

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910510059.8A Active CN110279429B (zh) 2019-06-13 2019-06-13 四维超声重建方法及装置

Country Status (1)

Country Link
CN (1) CN110279429B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112089438B (zh) * 2020-08-31 2021-07-30 北京理工大学 基于二维超声图像的四维重建方法及装置
CN116740219B (zh) * 2023-08-14 2024-01-09 之江实验室 一种三维光声断层成像方法、装置、设备及可读存储介质
CN117710199B (zh) * 2023-12-26 2024-05-28 中国矿业大学 三维成像方法及其相关设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107822660A (zh) * 2016-07-26 2018-03-23 美国西门子医疗解决公司 生成超声图像的方法、超声***和存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6966878B2 (en) * 2003-08-28 2005-11-22 Ge Medical Systems Global Technology Company, Llc Method and apparatus for obtaining a volumetric scan of a periodically moving object
CN101529471B (zh) * 2006-10-17 2013-01-23 皇家飞利浦电子股份有限公司 展示周期运动的多个阶段的区域的四维重建的方法和***
DE102007009017B3 (de) * 2007-02-23 2008-09-25 Siemens Ag Anordnung zur Unterstützung eines perkutanen Eingriffs
US8121669B2 (en) * 2008-04-07 2012-02-21 Mitsubishi Electric Research Laboratories, Inc. Method for tracking soft tissue masses in images using directed graphs
US8852106B2 (en) * 2009-04-13 2014-10-07 Hitachi Aloka Medical, Ltd. Ultrasound diagnostic apparatus

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107822660A (zh) * 2016-07-26 2018-03-23 美国西门子医疗解决公司 生成超声图像的方法、超声***和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Towards Real-time Registration of 4D Ultrasound Images;Pezhman Foroughi等;《Proceedings of the 28th IEEE EMBS Annual International Conference》;20060903;第404-407页 *

Also Published As

Publication number Publication date
CN110279429A (zh) 2019-09-27

Similar Documents

Publication Publication Date Title
CN110279429B (zh) 四维超声重建方法及装置
Huang et al. Bezier interpolation for 3-D freehand ultrasound
US9697639B2 (en) Three-dimensional model data generation device, method and program
CN109754394B (zh) 三维医学图像处理装置及方法
CN104520897B (zh) 图像噪声降低和/或图像分辨率提高
CN101084528B (zh) 用于集成可移动人体的医疗诊断信息和几何模型的方法、***
CN106600683B (zh) 一种面向骨骼ct序列图像的网格模型自适应重建方法
WO2007061931A2 (en) Fully automatic vessel tree segmentation
CA2619308A1 (en) Method and apparatus for automatic 4d coronary modeling and motion vector field estimation
WO2008091583A2 (en) Image-based extraction for vascular trees
CN111815766B (zh) 基于2d-dsa图像重建血管三维模型处理方法及***
Raza et al. Brain image representation and rendering: A survey
CN114241077B (zh) 一种ct图像分辨率优化方法及装置
CN109118554A (zh) 基于低秩稀疏分解的电阻抗图像重建方法
KR100680232B1 (ko) 뇌질환의 진단보조를 위한 뇌 해마 분석 방법 및 그 방법이수록되어 컴퓨터로 읽을 수 있는 기록매체
CN114399594A (zh) 一种基于中心线提取的血管壁影像自动曲面重建方法
JPH09198490A (ja) 3次元離散データ投影装置
JP2021186430A (ja) 画像処理装置及び画像処理方法。
WO2023230310A1 (en) System and method for real-time image registration during radiotherapy using deep learning
EP1447772A1 (en) A method of lung lobe segmentation and computer system
Jin et al. A new approach of arc skeletonization for tree-like objects using minimum cost path
CN107170009B (zh) 一种基于医学图像的护目镜基弯数据测量方法
Moraes et al. 3D Lanczos interpolation for medical volumes
US20140032180A1 (en) Method and apparatus for computing deformation of an object
CN110927644A (zh) 一种基于心脏核磁共振成像的左心室内机械性不同步的测量方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant