CN111768878A - 可视化指引病灶的方法及计算机可读存储介质 - Google Patents
可视化指引病灶的方法及计算机可读存储介质 Download PDFInfo
- Publication number
- CN111768878A CN111768878A CN202010618514.9A CN202010618514A CN111768878A CN 111768878 A CN111768878 A CN 111768878A CN 202010618514 A CN202010618514 A CN 202010618514A CN 111768878 A CN111768878 A CN 111768878A
- Authority
- CN
- China
- Prior art keywords
- focus
- lesion
- image
- dimensional model
- breast
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Software Systems (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Radiology & Medical Imaging (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本公开涉及可视化指引病灶的方法及计算机可读存储介质,其中方法包括:基于识别出的病灶,获取病灶的第一空间参数;在三维模型中拟合与所述第一空间参数对应的第二空间参数;根据所述第二空间参数,通过三维模型以可视化的方式向用户指引病灶。通过本公开的各实施例,通过三维模型向用户指引病灶,方便医生与患者之间的沟通,及影像医生与临床医生之间的沟通,提升医疗服务质量。
Description
技术领域
本公开涉及医疗信息处理技术领域,具体涉及一种可视化指引病灶的方法及计算机可读存储介质。
背景技术
目前在医学影像扫描中,例如乳腺X线扫描,越来越多的微小病灶被医生用设备更早期发现。由于医学影像较为专业,科室之间对医学影像的认识不一,外加患者从空间立体角度很难对病灶有直观认识,由此导致科室之间和医患之间沟通困难,沟通成本高。
发明内容
本公开意图提供一种可视化指引病灶的方法及计算机可读存储介质,通过三维模型向用户指引病灶,方便医生与患者之间的沟通,及影像医生与临床医生之间的沟通,提升医疗服务质量。
根据本公开的方案之一,提供一种可视化指引病灶的方法,包括:
基于识别出的病灶,获取病灶的第一空间参数;
在三维模型中拟合与所述第一空间参数对应的第二空间参数;
根据所述第二空间参数,通过三维模型以可视化的方式向用户指引病灶。
在一些实施例中,其中,所述获取病灶的第一空间参数,包括:获取病灶的影像参数、病灶在其所处病患部位中的空间位置参数。
在一些实施例中,其中,所述在三维模型中拟合与所述第一空间参数对应的第二空间参数,包括:
至少采集病灶所处病患部位的图像;
基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型;
根据病患部位与三维模型的匹配关系,拟合所述第二空间参数。
在一些实施例中,其中,所述至少采集病灶所处病患部位的图像,包括:
采集人体的胸部照片,识别***和乳腺形态;
所述基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型,包括:
基于识别出的***和乳腺形态,确定出三维模型或者从模型库中确定出三维模型,该三维模型至少包含有与该人体的胸部空间形态匹配的部分。
在一些实施例中,其中,所述至少采集病灶所处病患部位的图像,包括:
采集人体的胸部图像,以获取***的三维深度信息;
基于所述***的三维深度信息,得到***量化信息;
所述基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型,包括:
基于***量化信息,确定出三维模型或者从模型库中确定出三维模型,该三维模型至少包含有与该人体的胸部空间形态匹配的部分。
在一些实施例中,其中,所述通过三维模型以可视化的方式向用户指引病灶,包括:
以3D影像的形式呈现三维模型;
在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数。
在一些实施例中,其中,所述在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数,包括:
在二维显示界面中,以可连续变换视角的方式通过3D影像呈现所述虚拟病灶,所述可连续变换视角的方式包括自动变换视角或者手动变换视角。
在一些实施例中,其中,所述在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数,包括:
通过VR设备呈现所述虚拟病灶。
在一些实施例中,其中,还包括:
获取第一投照位的至少一个第一病灶的病灶信息和第二投照位的至少一个第二病灶的病灶信息;
针对每一个第一病灶,根据所述第一病灶的病灶信息和各第二病灶的病灶信息,确定所述第一病灶与各第二病灶之间的相似度;
根据每一个第一病灶与各第二病灶之间的相似度,确定对应于同一个病灶的第一病灶和第二病灶。
根据本公开的方案之一,提供计算机可读存储介质,其上存储有计算机可执行指令,所述计算机可执行指令由处理器执行时,实现:
根据上述的可视化指引病灶的方法。
本公开的各种实施例的可视化指引病灶的方法及计算机可读存储介质,至少通过基于识别出的病灶,获取病灶的第一空间参数;在三维模型中拟合与所述第一空间参数对应的第二空间参数;根据所述第二空间参数,通过三维模型以可视化的方式向用户指引病灶,从而通过三维模型向用户指引病灶在影像中二维的空间具体信息,包括大小、特征形态、数量、位置等在内的病灶信息,通过生成模拟病灶的一一对应过程,直观地指引病灶在患者身体里的情况,详细准确地展现病灶各种特征。
应当理解,前面的大体描述以及后续的详细描述只是示例性的和说明性的,并非对所要求保护的本公开的限制。
附图说明
在未必按照比例绘制的附图中,不同视图中相似的附图标记可以表示相似的构件。具有字母后缀的相似附图标记或具有不同字母后缀的相似附图标记可以表示相似构件的不同实例。附图通常作为示例而非限制地图示各种实施例,并且与说明书和权利要求书一起用于解释所公开的实施例。
图1示出本公开实施例涉及的乳腺钼靶影像,显示为压缩式的二维图像;
图2示出了本公开的一种实施例的可视化指引病灶的方法的流程图;
图3示出了本公开的一种实施例的三维模型;
图4示出了本公开的一种实施例的三维模型中指引出病灶(虚拟病灶);
图5示出了本公开的实施例涉及的一种胸部图像的模拟图,以正面为视角;
图6示出了本公开的实施例涉及的一种胸部图像的模拟图,以侧面为视角;
图7示出了一种CC位***图像中确定病灶深度的示意图;
图8示出了一种MLO位***图像中确定病灶深度的示意图。
具体实施方式
为了使得本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例的附图,对本公开实施例的技术方案进行清楚、完整地描述。显然,所描述的实施例是本公开的一部分实施例,而不是全部的实施例。基于所描述的本公开的实施例,本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
除非另外定义,本公开使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同,而不排除其他元件或者物件。
为了保持本公开实施例的以下说明清楚且简明,本公开省略了已知功能和已知部件的详细说明。
本公开实施例的技术方案中涉及基于病灶影像扫描的可视化指引病灶,以目前钼靶乳腺X线扫描为例,其已经成为乳腺癌的主要是筛查手段。在扫描中,尽可能多的显示***组织直接决定成像的质量和筛查的结果。然而,世界人口众多,并且各地区各人种患者***形态和脂肪含量差异很大,可以包括几十种***形态类型。与此同时,在不同等级的医院中,医疗设备操作人员的技能和经验差距很大,而临床中存在四种投照位,以及相应的十几种夹持摆位方式和扫描参数。随着检查仪器设备的进步,乳腺普查时,越来越多的微小病灶被医生用设备更早期发现。病灶早期被发现的同时,患者(受检查者)无任何不适,无明显疼痛感、异物感,需要医生对着医学影像图像耐心向患者解读影像图片病灶大小,特征形态,数量,位置等,一一告知患者大概在乳腺的上的映射。由于医学图像较为专业,科室之间对医学影像的认识不一,外加患者对医学用语的不了解,导致医生与患者沟通时间过长,沟通成本高。如图1是乳腺钼靶影像,压缩式的二维图像,患者较难理解病灶的具***置。
作为方案之一,如图2所示,本公开的实施例提供了一种可视化指引病灶的方法,包括:
S101:基于识别出的病灶,获取病灶的第一空间参数;
S102:在三维模型中拟合与所述第一空间参数对应的第二空间参数;
S103:根据所述第二空间参数,通过三维模型以可视化的方式向用户指引病灶。
具体的,以钼靶乳腺影像为例,本公开旨在通过患者实际病灶生成模拟病灶的一一对应过程,建立病灶与三维模型的映射关系。病灶识别过程,可以在医学影像的人工判读诊断,以及AI诊断基础上实现。
结合图3和图4所示,其中示出本公开实施例的三维模型指引病灶的一种呈现方式。步骤S101中,可以通过影像扫描设备获取目标乳腺的MLO位和CC位的图像,MLO位和CC位图像是通过不同角度拍摄乳腺生成的图像。为了直观指引病灶信息,本公开实施例的第一空间参数以表征病灶的空间状态、几何状态为主旨,可以包括病灶的影像参数、病灶在其所处病患部位中的空间位置参数,当然还可以包括更为详细的大小,特征形态,数量,位置等能够表征其的空间参数。
作为具体实施方式,本公开的实施例的可视化指引病灶的方法,可以为:所述在三维模型中拟合与所述第一空间参数对应的第二空间参数,包括:
至少采集病灶所处病患部位的图像;
基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型;
根据病患部位与三维模型的匹配关系,拟合所述第二空间参数。
继续以钼靶乳腺影像为例,本实施例的三维模型具体可以对应的为包含乳腺部位的三维模型。可以理解,本实施例的三维模型可以以虚拟的物理模型的形式呈现,不仅限于既定的模型。
也应当理解,用二维影像形式的钼靶乳腺影像的压缩的平面图,如图1所示,跟患者解释病灶在真实立体乳腺中的具***置非常困难,尤其是针对特殊病患群体,例如空间感较差、语言障碍、视觉感官障碍等患者,无法进行有效的医患沟通。作为本公开实现指引病灶的基本构思,在仅仅为了通过人体模型、器官模型、***模型来标识、指引出病灶进行说明的情况,本公开实施例的三维模型可以仅仅限于一类标准模型,例如标准男性人体模型、女性模型、通用***模型等等,该标准模型与当前患者并不一致,病患部位形态完全不同。但只要能够实现定性地、概念性地向相应用户指引出病灶点即可符合本公开的发明构思。
实际上,如前文所提及的,各人种患者***形态和脂肪含量差异很大,可以包括几十种***形态类型。即使同一人种,同一地区的人体***也会存在很大的不同,例如***间距、***轮廓、***与胸壁距离等等都千差万别。为了弥补上述存在的不足,本公开的优化方法方案旨在至少采集病灶所处病患部位的图像以确定更能够准确指引病灶的三维模型。具体的,可以采集胸部图像、乳腺图像,也可采集人体全部或者部分图像,只要包含有病患部位的图像即可。
三维模型与病患部位的匹配关系,以乳腺为例,可以包括但不限于两者所呈现的乳腺的形状、体积、轮廓,***与胸壁、腹腔、颈部等其他部位的相对位置,***形状、大小、间距等。易于理解,根据该匹配关系拟合第二空间参数,从而在三维模型中能够通过模拟病灶的第二空间参数映射实际病灶在病患部位的第一空间参数,向用户再现病灶的实际状态。
作为一种具体的实施方式,本公开实施例的可视化指引病灶的方法,可以为:所述至少采集病灶所处病患部位的图像,包括:
采集人体的胸部照片,识别***和乳腺形态;
所述基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型,包括:
基于识别出的***和乳腺形态,确定出三维模型或者从模型库中确定出三维模型,该三维模型至少包含有与该人体的胸部空间形态匹配的部分。
具体的,本公开的实施例可以获取患者乳腺图像,该图像可以为胸部照片。在患者检查前,通过例如乳腺机这类用于拍摄乳腺X射线图像的机器上的摄像头拍摄患者的乳腺图像,获取乳腺图像中的乳腺区域的照片以后识别照片中的***和乳腺轮廓,通过所述***和乳腺轮廓,确定出符合该患者的该病患部位的三维模型。本公开实施例也可以基于一种模型库的方式,模型库中存在多种、多类乳腺病灶模型,从这些乳腺病灶模型中确定出至少与该患者的该病患部位空间形态最为匹配的三维模型。
作为一种具体的实施方式,本公开实施例的可视化指引病灶的方法,可以为:所述至少采集病灶所处病患部位的图像,包括:
采集人体的胸部图像,以获取***的三维深度信息;
基于所述***的三维深度信息,得到***量化信息;
所述基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型,包括:
基于***量化信息,确定出三维模型或者从模型库中确定出三维模型,该三维模型至少包含有与该人体的胸部空间形态匹配的部分。
具体的,本公开实施例中可以使用3D摄像头或者可以测量景深的光学摄像设备(如kinetic等)对病患的胸部进行静态摄影,从而获得患者胸部正面的二维图片。如图5所示,模拟获取的二维胸部图像,基于该二维图像,找到双乳的***和***边缘,从而可以基本确定出***的直径/短径、两***的距离、两乳最小距离、两乳最大距离、乳腺的体积等信息。
具体的,可以通过Res-net深度学习模型,找到双乳的***和***边缘。Res-net深度学习模型对每层的输入做一个reference,学习形成残差函数,而不是学习一些没有reference的函数。这种残差函数更容易优化,能使网络层数大大加深。具体分析方法可以包括:a)根据实现获得的足够份数(例如成千上万份)患者正面图片,和人工标注信息(标记出***位置和***边缘);b)使用ResNet模型进行训练和调参,获得高准确度的深度学习模型,可自动标记***位置和***边缘。根据深度学习算法,在二维图片中找到的***位置和***边缘之后,可计算出:a)双***的距离;b)双乳的范围,其拟合圆的直径或半径;c)两乳腺之间最近连线的延长线,约吻合于前胸壁,从而计算出***到胸壁的最长垂直短距。
进一步的,如图6所示,获取***的三维深度信息,可以为:所述采集人体的胸部图像,以获取***的三维深度信息,包括:
获取人体胸部正面的胸部图像;
获取***到胸部表面距离的深度信息。
可以通过采集过程中测量景深的方式,获取***到胸部表面距离的深度信息,例如***至胸壁最大垂直短径。以摄像头采集本公开实施例的人体胸部影像为例,通过摄像头,可以得出,摄像头到两***的距离及夹角,从而计算出两***距离。相应的,结合同上方法,可以得出,摄像头到两***之间最远距离及夹角,摄像头到两***之间最近距离,从而计算出,***的直径或者半径。两***之间最近连线的延长线,约吻合于前胸壁,从而计算出***到胸壁的最长垂直短距,加上计算得到的***直径或半径,可及计算出***的体积。
其中,本公开实施例中,根据所述***信息和***边缘信息,结合所述***的三维深度信息,至少得到***量化信息,可以具体包括:
根据双乳***的距离、双乳的范围、***到胸壁的最长垂直短距,得到***的体积、***外观特征。结合前文可知,本实施例中具体的***外观特征的参量,可以是在临床扫描、检查中根据受检者的年龄,婚育史,哺乳史,乳腺的皮肤及外观形态(有无下垂),加上***的体积,可以大约估算,密度范围,进行***分型,得到相应的***外观特征。
通过***量化信息,根据包括双乳***的距离、双乳的范围、***到胸壁的最长垂直短距,得到***的体积、***外观特征在内的信息,本公开的实施例能够确定出符合该患者的该病患部位的三维模型。本公开实施例也可以基于一种模型库的方式,模型库中存在多种、多类乳腺病灶模型,从这些乳腺病灶模型中确定出至少与该患者的该病患部位空间形态最为匹配的三维模型。
作为具体的呈现方式,本公开的实施例为了直观指引病灶,可以为:以3D影像的形式呈现三维模型;
在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数。
具体的,结合前文所述,本公开的三维模型为了指引乳腺病灶,可以作为虚拟3D图像,通过显示载体向用户呈现。例如,针对空间感较差、语言障碍、视觉感官障碍等患者,在显示设备的显示界面上,或者在显示设备对空间投影上,呈现患者的病患部位的3D虚拟影像。当然,针对其他感官障碍的患者,本公开实施例借助于语音设备,还可以提供语音指引,以语音的方式向用户输出相应的空间参数,例如实际病灶大小、位置、数量等,并语音指引患者通过实际触摸的方式直观的定位病灶。
作为具体实施方式,当通过二维显示界面呈现三维模型的情况下,本公开实施例的可视化指引病灶的方法,可以为:
所述在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数,包括:
在二维显示界面中,以可连续变换视角的方式通过3D影像呈现所述虚拟病灶,所述可连续变换视角的方式包括自动变换视角或者手动变换视角。
具体的,在手持终端、电脑界面等提供二维显示界面的情况下,本公开的3D影像通过这些二维显示界面载体能够以可连续变换视角的方式进行呈现。用户可通过任何人机交互方式,例如通过鼠标操作、手指触控、转动显示设备等方式,实现连续视角的观看3D影像。当然,也可以通过动态影像、视频流等多媒体文件处理方式,自动变换视角向用户呈现各连续视角的3D影像。
进一步的,本公开实施例可以在将3D影像处理为VR格式的情况下,借助于VR设备,例如可穿戴式设备、VR眼镜等呈现3D影像,从而实现向用户指引病灶。
在一些实施例方案中,本公开的实施例可以进一步通过AI智能识别病患部位的病灶,从而为指引病灶提供准确的病灶信息。
具体的,本公开的实施例的可视化指引病灶的方法,还可以包括:
获取第一投照位的至少一个第一病灶的病灶信息和第二投照位的至少一个第二病灶的病灶信息;
针对每一个第一病灶,根据所述第一病灶的病灶信息和各第二病灶的病灶信息,确定所述第一病灶与各第二病灶之间的相似度;
根据每一个第一病灶与各第二病灶之间的相似度,确定对应于同一个病灶的第一病灶和第二病灶。
继续以钼靶乳腺影像为例,病灶在乳腺中的位置指的是病灶在乳腺中的空间位置,确定空间中的位置就需要知道x、y、z三个坐标值。假设***位置为原点,如图7和图8所示,图7为一种CC位***图像中确定病灶深度的示意图,图8为一种MLO位***图像中确定病灶深度的示意图。图7中深度为x坐标值,病灶至第二直线的距离为y坐标值,图8中病灶与第二直线的距离为z坐标值,假设CC位和MLO为的夹角为90度,通过上述步骤知道了x、y、z三个坐标值。可以基于病灶的位置和***的位置确定的病灶的深度,可以如图7所示CC位的左侧***图像中或者如图8所示MLO位的左侧***图像中,确定以***为圆心,预设长度为半径的圆弧与***边缘的交点所在的直线为第一直线;以过***且垂直于第一直线的直线为第二直线;确定病灶在第二直线上的投影,以投影与***之间的距离作为病灶的深度。考虑到不同投照位下,基于病灶位置与***位置确定的病灶的深度是保持不变的,所以采用该种方式,可以精确且快速的确定出不同投照位下的相同病灶。当然,还可以采用其他方式确定病灶的深度,比如基于病灶的位置和胸墙侧的位置确定病灶的深度。
通过本公开的可视化指引病灶的方法,基于本领域技术人员常识性了解,可以知晓同时公开了:
一种可视化指引病灶的显示设备,包括显示装置和处理装置,配置为:基于识别出的病灶,获取病灶的第一空间参数;
在三维模型中拟合与所述第一空间参数对应的第二空间参数;
根据所述第二空间参数,以显示装置为载体,通过三维模型以可视化的方式向用户指引病灶。
具体来说,本公开的发明构思之一,旨在能够至少:基于识别出的病灶,获取病灶的第一空间参数;在三维模型中拟合与所述第一空间参数对应的第二空间参数;根据所述第二空间参数,通过三维模型以可视化的方式向用户指引病灶,从而从而通过三维模型向用户指引病灶在影像中二维的空间具体信息,包括大小、特征形态、数量、位置等在内的病灶信息,通过生成模拟病灶的一一对应过程,直观地指引病灶在患者身体里的情况,详细准确地展现病灶各种特征。
本公开还提供了一种计算机可读存储介质,其上存储有计算机可执行指令,所述计算机可执行指令由处理器执行时,主要实现根据上述的可视化指引病灶的方法;至少包括:
基于识别出的病灶,获取病灶的第一空间参数;
在三维模型中拟合与所述第一空间参数对应的第二空间参数;
根据所述第二空间参数,通过三维模型以可视化的方式向用户指引病灶。
在一些实施例中,执行算机可执行指令处理器可以是包括一个以上通用处理设备的处理设备,诸如微处理器、中央处理单元(CPU)、图形处理单元(GPU)等。更具体地,该处理器可以是复杂指令集计算(CISC)微处理器、精简指令集计算(RISC)微处理器、超长指令字(VLIW)微处理器、运行其他指令集的处理器或运行指令集的组合的处理器。该处理器还可以是一个以上专用处理设备,诸如专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)、片上***(SoC)等。
在一些实施例中,计算机可读存储介质可以为存储器,诸如只读存储器(ROM)、随机存取存储器(RAM)、相变随机存取存储器(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、电可擦除可编程只读存储器(EEPROM)、其他类型的随机存取存储器(RAM)、闪存盘或其他形式的闪存、缓存、寄存器、静态存储器、光盘只读存储器(CD-ROM)、数字通用光盘(DVD)或其他光学存储器、盒式磁带或其他磁存储设备,或被用于储存能够被计算机设备访问的信息或指令的任何其他可能的非暂时性的介质等。
在一些实施例中,计算机可执行指令可以实现为多个程序模块,多个程序模块共同实现根据本公开中任何一项所述的医学影像的显示方法。
本公开描述了各种操作或功能,其可以实现为软件代码或指令或者定义为软件代码或指令。显示单元可以实现为在存储器上存储的软件代码或指令模块,其由处理器执行时可以实现相应的步骤和方法。
这样的内容可以是可以直接执行(“对象”或“可执行”形式)的源代码或差分代码(“delta”或“patch”代码)。这里描述的实施例的软件实现可以通过其上存储有代码或指令的制品提供,或者通过操作通信接口以通过通信接口发送数据的方法提供。机器或计算机可读存储介质可以使机器执行所描述的功能或操作,并且包括以可由机器(例如,计算显示设备、电子***等)访问的形式存储信息的任何机制,例如可记录/不可记录介质(例如,只读存储器(ROM)、随机存取存储器(RAM)、磁盘存储介质、光存储介质、闪存显示设备等)。通信接口包括与硬连线、无线、光学等介质中的任何一种接口以与其他显示设备通信的任何机制,例如存储器总线接口、处理器总线接口、因特网连接、磁盘控制器等。通信接口可以通过提供配置参数和/或发送信号来配置以准备通信接口,以提供描述软件内容的数据信号。可以通过向通信接口发送一个或多个命令或信号来访问通信接口。
本公开的实施例的计算机可执行指令可以组织成一个或多个计算机可执行组件或模块。可以用这类组件或模块的任何数量和组合来实现本公开的各方面。例如,本公开的各方面不限于附图中示出的和本文描述的特定的计算机可执行指令或特定组件或模块。其他实施例可以包括具有比本文所示出和描述的更多或更少功能的不同的计算机可执行指令或组件。
以上描述旨在是说明性的而不是限制性的。例如,上述示例(或其一个或更多方案)可以彼此组合使用。例如本领域普通技术人员在阅读上述描述时可以使用其它实施例。另外,在上述具体实施方式中,各种特征可以被分组在一起以简单化本公开。这不应解释为一种不要求保护的公开的特征对于任一权利要求是必要的意图。相反,本公开的主题可以少于特定的公开的实施例的全部特征。从而,以下权利要求书作为示例或实施例在此并入具体实施方式中,其中每个权利要求独立地作为单独的实施例,并且考虑这些实施例可以以各种组合或排列彼此组合。本公开的范围应参照所附权利要求以及这些权利要求赋权的等同形式的全部范围来确定。
以上实施例仅为本公开的示例性实施例,不用于限制本公开,本公开的保护范围由权利要求书限定。本领域技术人员可以在本公开的实质和保护范围内,对本公开做出各种修改或等同替换,这种修改或等同替换也应视为落在本公开的保护范围内。
Claims (10)
1.可视化指引病灶的方法,包括:
基于识别出的病灶,获取病灶的第一空间参数;
在三维模型中拟合与所述第一空间参数对应的第二空间参数;
根据所述第二空间参数,通过三维模型以可视化的方式向用户指引病灶。
2.根据权利要求1所述的方法,其中,所述获取病灶的第一空间参数,包括:获取病灶的影像参数、病灶在其所处病患部位中的空间位置参数。
3.根据权利要求2所述的方法,其中,所述在三维模型中拟合与所述第一空间参数对应的第二空间参数,包括:
至少采集病灶所处病患部位的图像;
基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型;
根据病患部位与三维模型的匹配关系,拟合所述第二空间参数。
4.根据权利要求3所述的方法,其中,
所述至少采集病灶所处病患部位的图像,包括:
采集人体的胸部照片,识别***和乳腺形态;
所述基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型,包括:
基于识别出的***和乳腺形态,确定出三维模型或者从模型库中确定出三维模型,该三维模型至少包含有与该人体的胸部空间形态匹配的部分。
5.根据权利要求3所述的方法,其中,
所述至少采集病灶所处病患部位的图像,包括:
采集人体的胸部图像,以获取***的三维深度信息;
基于所述***的三维深度信息,得到***量化信息;
所述基于该图像,确定出与病灶所处病患部位空间形态匹配的三维模型,包括:
基于***量化信息,确定出三维模型或者从模型库中确定出三维模型,该三维模型至少包含有与该人体的胸部空间形态匹配的部分。
6.根据权利要求1所述的方法,其中,所述通过三维模型以可视化的方式向用户指引病灶,包括:
以3D影像的形式呈现三维模型;
在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数。
7.根据权利要求6所述的方法,其中,所述在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数,包括:
在二维显示界面中,以可连续变换视角的方式通过3D影像呈现所述虚拟病灶,所述可连续变换视角的方式包括自动变换视角或者手动变换视角。
8.根据权利要求6所述的方法,其中,所述在3D影像中通过可视的虚拟病灶表征所述病灶的影像参数和/或所述病灶在其所处病患部位中的空间位置参数,包括:
通过VR设备呈现所述虚拟病灶。
9.根据权利要求1至8中任一项所述的方法,其中,还包括:
获取第一投照位的至少一个第一病灶的病灶信息和第二投照位的至少一个第二病灶的病灶信息;
针对每一个第一病灶,根据所述第一病灶的病灶信息和各第二病灶的病灶信息,确定所述第一病灶与各第二病灶之间的相似度;
根据每一个第一病灶与各第二病灶之间的相似度,确定对应于同一个病灶的第一病灶和第二病灶。
10.一种计算机可读存储介质,其上存储有计算机可执行指令,所述计算机可执行指令由处理器执行时,实现:
根据权利要求1至9中任一项所述的可视化指引病灶的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010618514.9A CN111768878A (zh) | 2020-06-30 | 2020-06-30 | 可视化指引病灶的方法及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010618514.9A CN111768878A (zh) | 2020-06-30 | 2020-06-30 | 可视化指引病灶的方法及计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111768878A true CN111768878A (zh) | 2020-10-13 |
Family
ID=72723060
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010618514.9A Pending CN111768878A (zh) | 2020-06-30 | 2020-06-30 | 可视化指引病灶的方法及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111768878A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112465802A (zh) * | 2020-12-10 | 2021-03-09 | 上海联影医疗科技股份有限公司 | 断层图像的处理方法、***、终端及计算机可读存储介质 |
CN115018795A (zh) * | 2022-06-09 | 2022-09-06 | 北京医准智能科技有限公司 | 医学影像中的病灶的匹配方法、装置、设备及存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002041751A2 (en) * | 2000-11-24 | 2002-05-30 | U-Systems, Inc. | Diagnosis method and ultrasound information display system therefor |
US20040254503A1 (en) * | 2003-06-13 | 2004-12-16 | Sarvazyan Armen P. | Internet-based system and a method for automated analysis of tactile imaging data and detection of lesions |
US20140254910A1 (en) * | 2013-03-11 | 2014-09-11 | Siemens Aktiengesellschaft | Imaging device, assignment system and method for assignment of localization data |
CN105377177A (zh) * | 2013-03-14 | 2016-03-02 | Vida诊断公司 | 肺减容手术的治疗设计 |
US20170109885A1 (en) * | 2014-06-27 | 2017-04-20 | Huawei Technologies Co., Ltd. | Method, apparatus, and terminal for obtaining vital sign data of target object |
CN109993733A (zh) * | 2019-03-27 | 2019-07-09 | 上海宽带技术及应用工程研究中心 | 肺部病灶的检测方法、***、存储介质、终端及显示*** |
CN110491480A (zh) * | 2019-05-22 | 2019-11-22 | 腾讯科技(深圳)有限公司 | 一种医疗图像处理方法、装置、电子医疗设备和存储介质 |
CN110689617A (zh) * | 2018-07-06 | 2020-01-14 | 华络医疗科技(苏州)有限公司 | 三维dot图像显示方法及设备 |
CN110974286A (zh) * | 2019-12-11 | 2020-04-10 | 北京华健蓝海医疗科技有限责任公司 | 乳腺x线影像肿块检出方法和装置 |
CN111344744A (zh) * | 2017-11-14 | 2020-06-26 | 齐默曼控股公司 | 用于展示三维物体的方法以及相关计算机程序产品、数字存储介质和计算机*** |
-
2020
- 2020-06-30 CN CN202010618514.9A patent/CN111768878A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002041751A2 (en) * | 2000-11-24 | 2002-05-30 | U-Systems, Inc. | Diagnosis method and ultrasound information display system therefor |
US20040254503A1 (en) * | 2003-06-13 | 2004-12-16 | Sarvazyan Armen P. | Internet-based system and a method for automated analysis of tactile imaging data and detection of lesions |
US20140254910A1 (en) * | 2013-03-11 | 2014-09-11 | Siemens Aktiengesellschaft | Imaging device, assignment system and method for assignment of localization data |
CN105377177A (zh) * | 2013-03-14 | 2016-03-02 | Vida诊断公司 | 肺减容手术的治疗设计 |
US20170109885A1 (en) * | 2014-06-27 | 2017-04-20 | Huawei Technologies Co., Ltd. | Method, apparatus, and terminal for obtaining vital sign data of target object |
CN111344744A (zh) * | 2017-11-14 | 2020-06-26 | 齐默曼控股公司 | 用于展示三维物体的方法以及相关计算机程序产品、数字存储介质和计算机*** |
CN110689617A (zh) * | 2018-07-06 | 2020-01-14 | 华络医疗科技(苏州)有限公司 | 三维dot图像显示方法及设备 |
CN109993733A (zh) * | 2019-03-27 | 2019-07-09 | 上海宽带技术及应用工程研究中心 | 肺部病灶的检测方法、***、存储介质、终端及显示*** |
CN110491480A (zh) * | 2019-05-22 | 2019-11-22 | 腾讯科技(深圳)有限公司 | 一种医疗图像处理方法、装置、电子医疗设备和存储介质 |
CN110974286A (zh) * | 2019-12-11 | 2020-04-10 | 北京华健蓝海医疗科技有限责任公司 | 乳腺x线影像肿块检出方法和装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112465802A (zh) * | 2020-12-10 | 2021-03-09 | 上海联影医疗科技股份有限公司 | 断层图像的处理方法、***、终端及计算机可读存储介质 |
CN115018795A (zh) * | 2022-06-09 | 2022-09-06 | 北京医准智能科技有限公司 | 医学影像中的病灶的匹配方法、装置、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11481987B2 (en) | Augmenting real-time views of a patient with three-dimensional data | |
US9962129B2 (en) | Method and apparatuses for assisting a diagnosing practitioner with describing the location of a target structure in a breast | |
RU2740259C2 (ru) | Позиционирование датчика ультразвуковой визуализации | |
US11016579B2 (en) | Method and apparatus for 3D viewing of images on a head display unit | |
US10881353B2 (en) | Machine-guided imaging techniques | |
JP2021523784A (ja) | 患者に貼付される光学コードを用いた患者の画像データと患者の実景との位置合わせ | |
CN107067398B (zh) | 用于三维医学模型中缺失血管的补全方法及装置 | |
CN111445983B (zh) | 用于乳腺扫描的医疗信息处理方法、***及存储介质 | |
US20130257910A1 (en) | Apparatus and method for lesion diagnosis | |
JP5934070B2 (ja) | 仮想内視鏡画像生成装置およびその作動方法並びにプログラム | |
KR102233585B1 (ko) | 복수의 후보 대응점을 이용하는 영상 정합 장치 및 방법 | |
CN111768878A (zh) | 可视化指引病灶的方法及计算机可读存储介质 | |
JP5802264B2 (ja) | 標本画像処理システム、方法、及びコンピュータプログラム | |
JP2014064721A (ja) | 仮想内視鏡画像生成装置および方法並びにプログラム | |
US10803645B2 (en) | Visualization of anatomical cavities | |
US11869216B2 (en) | Registration of an anatomical body part by detecting a finger pose | |
WO2021081839A1 (zh) | 基于vrds 4d的病情分析方法及相关产品 | |
CN111603199B (zh) | 一种基于体表定位测量仪的三维重建超声诊断*** | |
Serras | Virtual Reality with Applications in Radiology and Surgery (Collaborative Endoscopy) | |
US11653853B2 (en) | Visualization of distances to walls of anatomical cavities | |
CN117422661A (zh) | 活检穿刺位置定位方法、装置及存储介质 | |
WO2022096404A1 (en) | Rendering and displaying a 3d representation of an anatomical structure | |
CN116997937A (zh) | 用于在至少一个界面中可视化对象的至少一个区的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |