CN113272859A - 用于平台中立性全身图像分段的***及方法 - Google Patents

用于平台中立性全身图像分段的***及方法 Download PDF

Info

Publication number
CN113272859A
CN113272859A CN202080008220.2A CN202080008220A CN113272859A CN 113272859 A CN113272859 A CN 113272859A CN 202080008220 A CN202080008220 A CN 202080008220A CN 113272859 A CN113272859 A CN 113272859A
Authority
CN
China
Prior art keywords
image
individual
volume
processor
anatomical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080008220.2A
Other languages
English (en)
Inventor
J·F·A·里克特
K·E·M·约翰松
E·K·耶尔松
A·U·阿南德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sinai Diagnostics
Original Assignee
Sinai Diagnostics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sinai Diagnostics filed Critical Sinai Diagnostics
Publication of CN113272859A publication Critical patent/CN113272859A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/037Emission tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/466Displaying means of special interest adapted to display 3D data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/48Diagnostic techniques
    • A61B6/481Diagnostic techniques involving the use of contrast agents
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/505Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of bone
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/507Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for determination of haemodynamic parameters, e.g. perfusion CT
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5205Devices using data or image processing specially adapted for radiation diagnosis involving processing of raw data to produce diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5235Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT
    • A61B6/5241Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT combining overlapping images of the same imaging modality, e.g. by stitching
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5247Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61KPREPARATIONS FOR MEDICAL, DENTAL OR TOILETRY PURPOSES
    • A61K51/00Preparations containing radioactive substances for use in therapy or testing in vivo
    • A61K51/02Preparations containing radioactive substances for use in therapy or testing in vivo characterised by the carrier, i.e. characterised by the agent or material covalently linked or complexing the radioactive nucleus
    • A61K51/04Organic compounds
    • A61K51/041Heterocyclic compounds
    • A61K51/044Heterocyclic compounds having nitrogen as a ring hetero atom, e.g. guanethidine, rifamycins
    • A61K51/0455Heterocyclic compounds having nitrogen as a ring hetero atom, e.g. guanethidine, rifamycins having six-membered rings with one nitrogen as the only ring hetero atom
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/64Three-dimensional objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695Preprocessing, e.g. image segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/698Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/24Character recognition characterised by the processing or recognition method
    • G06V30/248Character recognition characterised by the processing or recognition method involving plural approaches, e.g. verification by template match; Resolving confusion among similar patterns, e.g. "O" versus "Q"
    • G06V30/2504Coarse or fine approaches, e.g. resolution of ambiguities or multiscale approaches
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10104Positron emission tomography [PET]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10108Single photon emission computed tomography [SPECT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03Recognition of patterns in medical or anatomical images
    • G06V2201/031Recognition of patterns in medical or anatomical images of internal organs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03Recognition of patterns in medical or anatomical images
    • G06V2201/033Recognition of patterns in medical or anatomical images of skeletal patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Molecular Biology (AREA)
  • Optics & Photonics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Surgery (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Human Computer Interaction (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Proteomics, Peptides & Aminoacids (AREA)
  • Chemical & Material Sciences (AREA)
  • Medicinal Chemistry (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Pulmonology (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)

Abstract

本文提出自动分析个体的三维(3D)医学图像以便自动鉴别所述3D图像内对应于特定解剖区域(例如,器官和/或组织)的特定3D体积的***及方法。值得注意地,本文中所描述的图像分析方法不限于身体的单个特定器官或部分。相反,其较为稳定且可广泛适用,从而提供整个身体中的解剖区域(包含软组织器官)的一致、有效及精确的检测。在某些实施例中,一或多个此类体积的精确鉴别用于自动测定表示放射性药品在特定器官和/或组织区域中的吸收的定量度量。这些吸收度量可用于评估个体的疾病状态、测定个体的预后和/或测定治疗模式的功效。

Description

用于平台中立性全身图像分段的***及方法
相关申请的交叉引用
本申请要求2019年1月07日提交的美国临时申请第62/789,155号、2019年4月24日提交的美国临时申请第62/837,941号、2019年6月19日提交的美国临时申请第62/863,608号、2019年7月03日提交的美国临时申请第62/870,210号、2019年9月27日提交的美国临时申请第62/907,158号、2019年11月12日提交的美国临时申请第62/934,305号的优先权及益处,所述申请中的每一者的内容以全文引用的方式并入本文中。
技术领域
本发明大体上涉及用于医学图像的自动分析的方法、***及架构。更特定地说,在某些实施例中,本发明涉及个体的图像内的一或多个特定所关注区域(例如,对应于特定器官或组织)的自动鉴别。
背景技术
靶向图像分析涉及使用放射性标记小分子,其结合到在疾病演变期间改变的体内特定受体、酶及蛋白质。在向患者投予之后,这些分子在血液中循环直到其发现其预期目标。已结合的放射性药品保留在疾病位点,而试剂的剩余部分自身体清除。分子的放射性部分充当信标,使得可使用全世界大部分医院中可见的常用核医学摄像机(已知为单光子发射计算机断层摄影术(single-photon emission computerized tomography;SPECT)或正电子发射断层摄影术(positron emission tomography;PET)摄像机)获得描绘疾病位置及浓度的图像。医师随后可使用此信息以确定患者的疾病的存在及范围。医师可使用此信息以向患者提供建议的治疗过程且跟踪疾病的进展。
存在多种可由放射科医师或医师使用的可用于分析及增强PET及SPECT图像的基于软件的分析技术。也存在大量可用于成像特定类型的癌症的放射性药品。用于所属领域中的成像剂包含(除其它以外包含),但不限于18F-NaF、11C-胆碱、2-去氧-2[18F]氟-d-葡萄糖(FDG)及其类似者。举例来说,小分子诊断剂1404靶向***特异性膜抗原(prostatespecific membrane antigen;PSMA)(在>95%的***癌细胞的表面上进行扩增的蛋白质及用于检测原发性及转移性***癌的认证目标)的胞外域。1404用-99m标记,其为可广泛使用的、相对便宜的,有助于有效制备且具有对核医学成像应用有吸引力的光谱特征的γ发射极同位素。
另一实例放射性药品为PyLTM(亦已知为[18F]DCFPyL及18F-PyL),其为用于***癌的临床阶段经氟化靶向PSMA的PET成像剂。在2016年4月的分子成像与生物学杂志期刊(issue of the Journal of Molecular Imaging and Biology)中公布的概念验证研究证实通过PyLTM的PET成像在假定转移性疾病及原发性肿瘤的位点中展示高水平的PyLTM吸收,从而表明在检测***癌中有高敏感性及特异性的潜能。
肿瘤学家可使用来自患者的靶向PET或SPECT研究的图像作为其评估以下的输入:患者是否患有特定疾病(例如***癌)、疾病的何种阶段为明显的、经建议的治疗过程(如果存在)将为什么、是否指示手术干预及可能的预后。肿瘤学家可将放射科医师报告用于此评估中。放射科医师报告为由放射科医师针对请求成像研究的医师而制备的对PET或SPECT图像的技术评估,且包含例如所执行的研究类型、临床历史、图像之间的比较、用于执行研究的技术、放射科医师的观测及发现,以及放射科医师可基于成像研究结果得出的总体印象及建议。将署名的放射科医师报告发送到预订研究的医师以供医师审查,接着医师与患者之间就结果及治疗建议进行讨论。
因此,所述过程涉及使放射科医师对患者执行成像研究;分析所获得的图像;创建放射科医师报告;将报告转发到请求医师;使医师制定评估及治疗建议;及使医师将结果、建议及风险传达到患者。所述过程也可涉及由于不确定结果而重复成像研究或基于初始结果预订其它测试。
如果成像研究展示患者患有特定疾病或病状(例如,癌症),那么医师会论述不同治疗选项(包含手术)以及不做任何事或采用谨慎等待或主动监测方法而不进行手术的风险。
从医师的视角及从患者的视角二者来看,存在与此过程相关的限制。虽然放射科医师的报告必然有帮助,但医师最终必须依赖于其在对其患者制定评估及建议中的经验。此外,患者必须对其医师非常信任。医师可对患者展示其PET/SPECT图像且可告知患者与不同治疗选项相关的数值风险或特定预后的可能性,但患者可能很难理解此信息。此外,患者的家人将有可能具有问题,尤其当癌症经诊断,但患者选择不进行手术时。患者和/或其家族成员可在线上搜索补充信息且可产生关于诊断病状的风险的误会。艰难的考验可变得更具创伤性。
因此,仍需要用于改进医学成像研究的自动分析且将那些结果、诊断、预后、治疗建议及相关风险传达到患者的***及方法。尤其需要的是一种在整个身体中持续地、有效地及精确地检测解剖区域(包含软组织器官)的图像分析***。
发明内容
本文提出自动分析个体的三维(3D)医学图像以便自动鉴别所述3D图像内对应于特定解剖区域(例如,器官和/或组织)的特定3D体积的***及方法。值得注意地,本文中所描述的图像分析方法不限于身体的单个特定器官或部分。相反,其较为稳定及可广泛适用,从而提供整个身体中的解剖区域(包含组织和/或器官)的一致、有效及精确的检测。在某些实施例中,一或多个此类体积的精确鉴别用于自动测定表示放射性药品在特定器官和/或组织区域中的吸收的定量度量。这些吸收度量可用于评估个体的疾病状态、测定个体的预后和/或测定治疗模式的功效。
相比于仅鉴别2D图像中的2D区域的某些其它图像分析,本文中所描述的方法处理3D图像的能力是一重要优势。举例来说,有关于癌症检测的一种方法(EXINI DiagnosticsAB的骨扫描指标(BSI)软件)检测疑似骨癌的区域(亦参见2014年10月7日发布的美国专利申请案第8,855,387号)。然而,与三维图像相反,对二维闪烁摄影术图像实行BSI分析。
此外,随着可用于医师检测癌症的成像剂的选项不断增加,仍需要在使用多个检测模式(SPECT/CT、PET/CT及其类似者)分析来自任何各种成像剂的图像中具有效用的软件。例如SPECT及PET的功能图像提供关于体内生物过程的详细及特定信息,但其潜能仅在与详细解剖图组合时得以实现以使得功能可局部化于个别器官及结构。虽然CT及MRI提供详细解剖信息,但器官及结构的常规(例如手动)鉴别为困难、主观及费时的,从而使某些评估在无计算机支持的情况下是不可行的。因此,通过提供允许适用于各种成像模式的精确及稳固图像分段的平台中立性图像分析方法,本文中所描述的***及方法有助于与癌症检测、诊断、分期及其类似者特定有关的图像分析。
举例来说,本文中所描述的全身分段方法允许解剖及功能图像的组合的自动分析以便精确地鉴别且分级个体内的癌病变。特定地说,在投予放射性药品,例如PSMA结合剂(如PyLTM)后,可获得个体的PET/CT复合图像。本文中所描述的基于机器学习的自动分段方法用于在PET/CT复合物的CT图像内鉴别表示其中可能发现癌病变的目标组织区域的目标所关注体积(volume of interest;VOI)。举例来说,可鉴别对应于个体的一或多个骨的图形表示的骨骼VOI。一旦在解剖、CT、图像中鉴别出骨骼VOI,那么可将其映射到PET图像以鉴别其中的对应骨骼体积。随后分析PET图像中的对应骨骼体积以检测一或多个相对高强度的局部化区域(称作热点)。这些热点在物理上对应于放射性药品积累增加的局部区域,且因此对应于潜在癌病变。
在某些实施例中,利用经由本文中所描述的方法精确地及快速地执行全身分段的能力以提供有用及均一比例,在所述比例上评价和/或测量在对应于经检测热点的物理病变中的放射性药品吸收水平(例如,借此对特定生物分子(例如PSMA)的表达水平进行分级)。特定地说,除检测对应于其中可发生癌病变的特定目标组织区域的目标VOI以外,还检测对应于参考组织区域的额外目标VOI。另外将这些参考VOI映射到PET图像以鉴别其中的对应参考体积。随后计算这些参考体积内的强度测量值(例如平均值、峰值、最大值等)且用作参考点,针对所述参考点评价个别经检测热点的强度且将其按比例转换为指标值。
举例来说,在某些实施例中,在解剖图像内鉴别分别对应于主动脉及肝脏的一部分的表示的主动脉及肝脏VOI且将其映射到功能图像以鉴别其中的对应参考体积。测定这些参考体积中的每一者的强度水平(例如,作为各参考体积内的立体像素强度的平均值、中位值、峰值等),且将其按一定比例分配对应指标水平。随后,针对各特定个别热点,测定热点强度水平(例如类似地,作为经检测热点内的立体像素强度的平均值、中位值、峰值等)。随后基于个别热点强度水平、主动脉参考强度水平及肝脏参考强度水平测定对应个别热点指标值。此方法提供评价及测量与不同图像之间的热点相关的吸收的标准化比例。举例来说,此允许比较在不同时间点针对单个个体所获得的多个图像以及不同个体的图像之间的比较。
在某些实施例中,个别热点指标用于计算分析癌病变存在的个体和/或特定目标组织区域的总体指标。总体指标可充当疾病严重程度和/或风险的指示符,例如通过反映特定目标组织区域内的总病变体积,利用基于个别经检测热点的热点指标值的加权以解释病变内的放射性药品吸收。举例来说,骨骼体积内的PSMA加权总病变体积可计算为由其对应指标值加权的个别经检测热点体积的加权和。此指标可将癌转移的水平和/或侵袭性反映到骨中。
对应于其它组织区域的体积可经类似地鉴别且用于测定总体指标值。举例来说,***体积也可用于评估癌转移的严重程度。也可鉴别及分析对应于最初发现局部化疾病的组织区域的体积以检测病变。举例来说,***体积可用于评估***癌在其初始阶段的严重程度。同样地,表示***组织区域的***体积及表示肺组织区域的肺体积可分别用于评估局部化乳癌及肺癌。
因此,通过提供全身分段及对整个遍及个体身体的各种相关目标组织区域中的癌病变的基于图像的自动分析,本文中所描述的基于AI的***及方法允许分析处于不同阶段的各种癌症。所述技术可用于鉴别有关组织区域中的局部化疾病(例如***)且对其分期,例如用于初期筛选及监测;以及随着疾病进展而监测癌转移的区域,例如骨及***。同样地,本文中所描述的方法提供一套完整的工具以用于癌症的基于图像的自动检测,且跟踪疾病演变、进展及对治疗的反应。
在一个方面,本发明涉及一种用于自动处理3D图像以鉴别所述3D图像内对应于特定目标组织区域的3D体积的方法,所述方法包括:(a)通过计算装置的处理器接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(magnetic resonanceimaging;MRI);例如超声波]所获得的个体的3D解剖图像,其中所述3D解剖图像包括个体内的组织(例如,软组织和/或骨)的图形表示;(b)针对多个目标组织区域中的每一者,通过所述处理器使用一或多个机器学习模块(例如,其中所述一或多个机器学习模块中的至少一者为卷积神经网络(Convolutional Neural Network;CNN)模块)自动鉴别所述3D解剖图像内的对应目标所关注体积(VOI);(c)通过所述处理器测定表示多个3D分段掩模的3D分段图,各3D分段掩模表示特定鉴别的目标VOI(例如,将所述多个3D分段掩模自动以数字方式拼接在一起以形成所述3D分段图);及(d)存储和/或提供所述3D分段图以用于显示和/或进一步处理。
在某些实施例中,3D解剖图像为全身图像。
在某些实施例中,步骤(c)包括将多个3D分段掩模以数字方式拼接在一起以形成3D分段图{例如,通过创建最初的空图像体积(例如,将所有立体像素值初始化成零)且接着将标记从各分段掩模***到图像体积中[例如,通过将输入图像到一或多个机器学习模块的所标记(例如,作为表示如由机器学习模块测定的特定目标组织区域)立体像素映射到图像体积的立体像素(例如,以便将图像体积的立体像素与表示相同物理位置的输入图像的立体像素匹配,借此正确地标记图像体积的立体像素)]}。
在某些实施例中,步骤(b)包括针对至少一个特定目标组织区域:使用第一模块(例如,定位模块)(例如,第一机器学习模块)测定3D解剖图像内的初始VOI,所述初始VOI对应于解剖区域(例如一组相关组织,例如骨盆区域、胸部区域、头部和/或颈部区域及其类似者),所述解剖区域含有特定目标组织区域(例如,其中初始VOI会排除3D解剖图像中比其所包含更多的立体像素;例如,其中初始VOI包含3D解剖图像的小于25%的立体像素;例如,其中初始VOI内的大部分立体像素表示解剖区域内的物理体积);及使用第二模块(例如分段模块)(例如,第二机器学习模块)鉴别初始VOI内对应于特定目标组织区域的目标VOI。
在某些实施例中,第二模块为实施CNN的CNN模块。
在某些实施例中,第一模块为CNN模块,其实施CNN以执行粗略分段来自动鉴别对应于含有特定目标组织区域的解剖区域的初始VOI[例如,通过自动鉴别解剖图像内一组相关组织的图形表示(例如,且随后将初始VOI测定为完全包围所述组相关组织的经鉴别图形表示的矩形区域(例如,矩形柱或矩形框))][例如针对预期位于解剖区域内的一或多个特定组织区域中的每一者,通过自动鉴别解剖图像中的对应VOI(例如,经由粗略分段),例如且将初始VOI测定为完全包围对应于特定组织区域的所有经鉴别VOI的矩形区域]。
在某些实施例中,第一模块接收解剖图像的子采样[例如,利用沿着一或多个维度的两个或多于两个(例如四个)因素]版本作为输入,且使用解剖图像的子采样版本鉴别初始VOI[例如,且其中第二模块接收裁剪到初始VOI的解剖图像的全分辨率版本(例如,使得第一模块对表示物理体积比第二模块大的较低分辨率图像进行操作,而第二模块对较高分辨率但表示较小物理体积的图像进行操作)]。
在某些实施例中,第一模块为第一CNN模块且第二模块为第二CNN模块,且其中第一CNN模块包括额外滤波器以便解释图像大小相对于第二CNN模块增大的变化率。
在某些实施例中,3D解剖图像为全身图像且步骤(b)包括:使用一或多个实施机器学习技术的定位模块(例如,其中各定位模块为实施CNN的CNN模块)自动测定3D解剖图像内的多个初始VOI,各初始VOI对应于特定解剖区域(例如一组相关组织,例如骨盆区域、胸部区域、头部和/或颈部区域、脊柱区域、上半身区域、下半身区域等)且目标VOI的相关子集位于其中;及针对各初始VOI,使用一或多个实施机器学习技术的分段模块(例如,其中各分段模块为实施CNN的CNN模块)自动鉴别目标VOI的相关子集。
在某些实施例中,多个初始VOI包括一或多个选自由以下组成的群组的成员:对应于个体的骨盆区域的骨盆区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:左髂骨和/或右髂骨、骶骨及尾骨);对应于个体的脊柱的脊柱区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:胸椎、腰椎及胸骨);对应于个体的上半身的左侧的左上半身区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:一或多个左肋、左肩胛骨及左锁骨);及对应于个体的上半身的右侧的右上半身区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:一或多个右肋、右肩胛骨及右锁骨)。
在某些实施例中,方法包括:(e)通过处理器接收使用功能成像模式[例如单光子发射计算机断层摄影术(SPECT);例如正电子发射断层摄影术(PET)]所获得的个体的3D功能图像[例如,其中3D功能图像包括多个立体像素,其各自表示个体内的特定物理体积且具有表示从特定物理体积发射的所检测辐射的强度值,其中3D功能图像的多个立体像素的至少一部分表示个体的目标组织区域中的一或多者内的物理体积];及(f)通过处理器使用3D分段图在3D功能图像内鉴别一或多个各自对应于鉴别的目标VOI的3D体积(例如,通过将3D分段图的3D分段掩模映射到3D功能图像)。
在某些实施例中,方法包括:(g)通过处理器测定个体的癌症状态[(例如***癌状态;例如转移癌状态(例如转移癌,包含例如转移性***癌、乳癌、肺癌、结肠癌、皮肤癌等))](例如,使用功能图像内的立体像素强度及一或多个经鉴别3D体积)(例如,基于经检测病变)[例如,个体患有和/或罹患***癌和/或特定阶段的***癌(例如,转移性***癌)的可能性][例如,个体患有和/或罹患转移癌(包含例如转移性***癌、乳癌、肺癌、结肠癌、皮肤癌等)的可能性]。
在某些实施例中,方法包括:针对在不同时间点采集的多个解剖及对应功能图像,反复地执行步骤(a)至(g)以测定在各时间点个体的癌症状态,借此跟踪随着时间推移的癌症状态(例如,评价疾病进展和/或治疗功效)。
在某些实施例中,方法包括(例如,在步骤(g)之前):(h)通过处理器自动调节3D功能图像的立体像素强度以校正一或多个背景组织区域中的背景吸收(例如,放射性药品的吸收)(例如,校正在正常情形下发生在一或多个背景组织区域中且不必指示癌病变存在的放射性药品的吸收)。
在某些实施例中,目标组织区域包括一或多个背景组织区域且步骤(h)包括:使用3D分段图以在3D功能图像内鉴别一或多个各自对应特定背景组织区域的3D背景组织体积(例如,通过将3D分段图的3D分段掩模映射到3D功能图像);及基于3D背景组织体积内的立体像素强度调节3D功能图像的立体像素强度(例如,通过使用3D背景组织体积内的立体像素强度来估计对3D背景组织体积外部的强度的贡献)。
在某些实施例中,一或多个背景组织区域包括一或多个选自由以下组成的群组的成员:膀胱(bladder)(例如,膀胱)、肾脏、十二指肠、小肠、脾、肝脏、胰脏、胃、肾上腺、直肠及睾丸。
在某些实施例中,方法包括:(i)通过处理器自动检测3D功能图像内的一或多个热点,所述热点基于3D功能图像内的立体像素强度[例如基于3D功能图像内的强度与阈值的比较(例如,其中3D功能图像为3D PET图像且阈值为特定标准吸收值(standard uptakevalue;SUV)水平)](例如,且另外基于3D功能图像内鉴别的一或多个3D体积)经测定以表示病变。
在某些实施例中,步骤(i)包括使用一或多个阈值[例如比较具有一或多个阈值的3D功能图像的立体像素强度(例如,其中一或多个阈值包括多个区域特定阈值,其各自用于3D功能图像内所鉴别的一或多个3D体积的特定子集)]。
在某些实施例中,步骤(i)包括将一或多个滤波器应用于3D功能图像[例如,如同斑点(blob)检测技术;例如,其中一或多个滤波器包括一或多个高斯(Gaussian)滤波器(例如高通高斯滤波器及低通高斯滤波器,如同高斯差分(Difference of Gaussians)方法);例如,其中一或多个滤波器包括拉普拉斯(Laplacian)滤波器(例如,如同高斯拉普拉斯(Laplacian of a Gaussian)技术);例如,其中不同滤波器核用于3D功能图像内所鉴别的一或多个3D体积的不同子集]。
在某些实施例中,步骤(i)包括使用两种或多于两种技术的组合以鉴别3D功能图像内所鉴别的一或多个3D体积的不同子集中的热点[例如,针对一或多个3D体积的第一子集使用第一滤波方法(例如,如同段落[0038])且针对第二子集使用第二滤波方法;例如针对一或多个3D体积的第一子集使用定限方法(例如,如段落[0037])且针对一或多个3D体积的第二子集使用滤波方法(例如,如段落[0038])]。
在某些实施例中,步骤(i)包括:检测热点的初始集合,且针对初始集合的热点的至少一部分,将经检测热点的至少一部分的各热点分类为癌病变或非癌病变(例如,如噪声)[例如使用机器学习模块;例如基于热点的形状和/或位置(例如,结合解剖知识;例如,其中位置包含对应于热点位于其中的3D体积的特定目标组织区域的鉴别和/或特定目标组织区域内热点的相对位置);例如且从初始集合去除分类为非癌病变的热点,借此获得经测定以表示病变的热点的最终集合]。
在某些实施例中,目标组织区域包括一或多个背景组织区域且方法包括:使用3D分段图以在3D功能图像内鉴别一或多个各自对应特定背景组织区域(例如,其中显著的放射性药品吸收在正常情形下发生且不必指示癌病变存在的背景组织区域)的3D背景组织体积(例如,通过将3D分段图的3D分段掩模映射到3D功能图像);且从用于在步骤(i)处自动检测一或多个热点的立体像素中排除3D背景组织内的3D立体像素。
在某些实施例中,方法包括使用一或多个经检测热点(例如,一或多个经检测热点的强度)以测定个体的癌症状态。
在某些实施例中,目标组织区域包括一或多个参考组织区域且方法包括:使用3D分段图以通过处理器在3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;通过处理器测定一或多个参考强度值,其各自与一或多个3D参考体积的特定3D参考体积相关且对应于特定3D参考体积内的强度测量值(例如,平均值(average/mean)、中位值、最大值等);通过处理器测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分的特定热点相关且对应于特定热点的强度测量值(例如,平均值、中位值、最大值等);及通过处理器,使用一或多个个别热点强度值及一或多个参考强度值测定一或多个个别热点指标值[例如,其中各个别热点指标值与经检测的一或多个热点的至少一部分的特定热点相关,且使用(i)与特定热点相关的个别热点强度值及(ii)一或多个参考强度值(例如,基于其之间的比较)来测定]。
在某些实施例中,测定一或多个个别热点指标值包括将一或多个参考强度值中的每一者按一定比例映射到对应参考指标值,且针对各个别热点强度值,使用参考强度值及对应参考指标值以内插对应个别热点指标值。
在某些实施例中,参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)及腮腺。
在某些实施例中,第一参考强度值(i)为与对应于主动脉部分的3D参考体积相关的血液参考强度值,且(ii)映射到第一参考指标值;第二参考强度值(i)为与对应于肝脏的3D参考体积相关的肝脏参考强度值,且(ii)映射到第二参考指标值;以及第二参考强度值大于第一参考强度值且第二参考指标值大于第一参考指标值。
在某些实施例中,参考强度值包括映射到最大参考指标值的最大参考强度值,且具有大于最大参考强度值的相关热点强度值的热点经分配等于最大参考指标值的热点指标值。
在某些实施例中,方法包括通过处理器使用一或多个热点指标值的至少一部分测定指示个体的癌症状态的总体指标值。
在某些实施例中,总体指标值测定为个别热点指标值的至少一部分[例如,位于对应于个体的骨骼区域的功能图像的3D体积内;例如位于对应于个体的淋巴区域的功能图像的3D体积内]的加权和[例如,其中各热点指标值的总和由相关热点的大小测量值(例如3D体积;例如平均直径)加权]。
在某些实施例中,总体指标值与解剖图像内所鉴别的对应于特定目标VOI的特定目标组织区域相关;且总体指标值是使用位于3D功能图像中对应于特定鉴别目标VOI的特定3D体积内的热点子集的热点指标值来测定[例如,且其中总体指标值计算为热点子集的热点指标值的加权和(例如,其中加权和由特定目标组织区域的估计体积标准化(例如,计算为功能图像中特定3D体积的体积和/或特定目标VOI的体积))]。
在某些实施例中,特定目标组织区域是选自由以下组成的群组:包括个体的一或多个骨的骨骼区域、淋巴区域及***区域。
在某些实施例中,3D解剖图像为x射线计算机断层摄影术(CT)图像,且3D功能图像为3D单光子发射计算机断层摄影术(SPECT)图像。
在某些实施例中,3D解剖图像为x射线计算机断层摄影术(CT)图像,且3D功能图像为3D正电子发射断层摄影术(PET)图像。
在某些实施例中,在向个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得个体的3D PET图像。
在某些实施例中,放射性药品包括[18F]DCFPyL。
在某些实施例中,步骤(b)包括通过处理器裁剪3D解剖图像以去除表示空气的立体像素[例如创建经裁剪的解剖图像,且使用经裁剪的解剖图像以鉴别一或多个目标VOI(例如,使用经裁剪的解剖图像作为输入用于一或多个机器学习模块,与原始大小的3D解剖图像相反)]。
在某些实施例中,目标组织区域包括一或多个选自由以下组成的群组的成员:左髋骨、右髋骨、骶骨及尾骨区域、左锁骨、右锁骨、左肋、右肋、左肩胛骨、右肩胛骨、胸骨、腰椎、胸椎、颅骨、颈椎、左股骨、右股骨、左肱骨、右肱骨、***、膀胱、直肠、左臀大肌、右臀大肌、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)、左肾脏、右肾脏、肝脏、左肺、右肺、脾、脑室、左肾上腺、右肾上腺、胆囊、大脑、胰脏、心脏、下颌骨、左支气管、右支气管、气管、左髂总动脉(left common iliac artery)、右髂总动脉及腮腺。
在某些实施例中,目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左股骨、右股骨、左腓骨、右腓骨、左髋骨、右髋骨、左肱骨、右肱骨、下颌骨、左髌骨、右髌骨、左桡骨、右桡骨、左胫骨、右胫骨、左尺骨、右尺骨、左肋(例如,第一左肋、第二左肋、第三左肋、第四左肋、第五左肋、第六左肋、第七左肋、第八左肋、第九左肋、第十左肋、第十一左肋、第十二左肋)、右肋(例如,第一右肋、第二右肋、第三右肋、第四右肋、第五右肋、第六右肋、第七右肋、第八右肋、第九右肋、第十右肋、第十一右肋、第十二右肋)、骶骨及尾骨(例如,经合并的骶骨及尾骨区域;例如单独地骶骨及尾骨,以便区分两者)、左肩胛骨、右肩胛骨、颅骨、胸骨、脊椎骨区域[例如颈椎区域,包括一或多个(例如至多所有)颈椎;例如腰椎区域,包括一或多个(例如至多所有)腰椎;例如胸椎区域,包括一或多个(例如至多所有)胸椎],及个别脊椎骨[例如个别颈椎(例如,第一颈椎、第二颈椎、第三颈椎、第四颈椎、第五颈椎、第六颈椎、第七颈椎);例如个别腰椎(例如,第一腰椎、第二腰椎、第三腰椎、第四腰椎、第五腰椎、第六腰椎);例如个别胸椎(例如,第一胸椎、第二胸椎、第三胸椎、第四胸椎、第五胸椎、第六胸椎、第七胸椎、第八胸椎、第九胸椎、第十胸椎、第十一胸椎、第十二胸椎)]。
在某些实施例中,目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左髋骨、右髋骨、左肋(例如,第一左肋、第二左肋、第三左肋、第四左肋、第五左肋、第六左肋、第七左肋、第八左肋、第九左肋、第十左肋、第十一左肋、第十二左肋)、右肋(例如,第一右肋、第二右肋、第三右肋、第四右肋、第五右肋、第六右肋、第七右肋、第八右肋、第九右肋、第十右肋、第十一右肋、第十二右肋)、骶骨及尾骨(例如,经合并的骶骨及尾骨区域;例如单独地骶骨及尾骨,以便区分两者)、左肩胛骨、右肩胛骨、胸骨、脊椎骨区域[例如颈椎区域,包括一或多个(例如至多所有)颈椎;例如腰椎区域,包括一或多个(例如至多所有)腰椎;例如胸椎区域,包括一或多个(例如至多所有)胸椎],及个别脊椎骨[例如个别腰椎(例如,第一腰椎、第二腰椎、第三腰椎、第四腰椎、第五腰椎);例如个别胸椎(例如,第一胸椎、第二胸椎、第三胸椎、第四胸椎、第五胸椎、第六胸椎、第七胸椎、第八胸椎、第九胸椎、第十胸椎、第十一胸椎、第十二胸椎)]。
在某些实施例中,目标组织区域中的一或多者包括一或多个选自由以下组成的群组的软组织区域(例如器官):左肾上腺、右肾上腺、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)、大脑、左支气管、右支气管、胆囊、左臀大肌、右臀大肌、心脏、左总胯动脉、右总胯动脉、左肾脏、右肾脏、肝脏、左肺、右肺、胰脏、***、直肠、脾、气管、膀胱、脑室及腮腺。
在某些实施例中,一或多个目标组织区域包括一或多个选自由以下组成的群组的软组织区域(例如器官):胆囊、左肾脏、右肾脏、肝脏、左肺、右肺、***及膀胱。
在某些实施例中,目标组织区域包括一或多个骨区域,其各从对应于特定骨[例如,其中目标组织区域包括段落[0058]或[0059]中所列的至少一部分(例如,至多所有)骨];及一或多个软组织区域,其各自对应于特定软组织区域[例如,其中目标组织区域包括段落[0060]或[0061]中所列的至少一部分(例如,至多所有)软组织区域]。
在另一方面,本发明涉及一种用于自动处理3D图像以自动鉴别个体内的癌病变的方法,所述方法包括:(a)通过计算装置的处理器接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(MRI);例如超声波]所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织(例如,软组织和/或骨)的图形表示;(b)针对多个目标组织区域中的每一者,通过所述处理器使用一或多个机器学***)]经测定以表示病变。
在某些实施例中,方法包括通过处理器使用一或多个经检测热点(例如,一或多个经检测热点的强度)以测定个体的癌症状态。
在某些实施例中,目标组织区域包括一或多个参考组织区域且其中方法包括:使用3D分段图以通过处理器在3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;测定一或多个参考强度值,其各自与一或多个3D参考体积的特定3D参考体积相关且对应于特定3D参考体积内的强度测量值(例如,平均值、中位值、最大值等);通过处理器测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分的特定热点相关且对应于特定热点的强度测量值(例如,平均值、中位值、最大值等);及通过处理器,使用一或多个个别热点强度值及一或多个参考强度值测定一或多个个别热点指标值[例如,其中各个别热点指标值与经检测的一或多个热点的至少一部分的特定热点相关,且使用(i)与特定热点相关的个别热点强度值及(ii)一或多个参考强度值(例如,基于其之间的比较)来测定]。
在某些实施例中,参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)及腮腺。
在某些实施例中,方法包括通过处理器使用一或多个热点指标值的至少一部分测定指示个体的癌症状态的总体指标值。
在某些实施例中,总体指标值测定为个别热点指标值的至少一部分[例如,位于对应于个体的骨骼区域的功能图像的3D体积内;例如位于对应于个体的淋巴区域的功能图像的3D体积内]的加权和[例如,其中各热点指标值的总和由相关热点的大小测量值(例如3D体积;例如平均直径)加权]。
在某些实施例中,3D解剖图像为x射线计算机断层摄影术(CT)图像,且3D功能图像为3D正电子发射断层摄影术(PET)图像。
在某些实施例中,在向个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得个体的3D PET图像。
在某些实施例中,放射性药品包括[18F]DCFPyL。
在另一方面,本发明涉及一种用于自动处理3D图像以鉴别及测量放射性药品在患有癌症(例如***癌、乳癌、肺癌;例如转移癌,例如转移性***癌、转移性乳癌、转移性肺癌)或处于其风险下的个体内的癌病变(例如癌转移)中的吸收的方法,所述方法包括:(a)通过计算装置的处理器接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(MRI);例如超声波]所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织(例如,软组织和/或骨)的图形表示;(b)通过所述处理器,使用一或多个机器学***均值、最大值、中位值等)测定主动脉参考强度水平;基于所述第二肝脏体积内立体像素的强度测量值(例如,平均值、最大值、中位值等)测定肝脏参考强度水平;且针对各个别经检测热点:基于经检测热点的立体像素的强度测量值(例如,平均值、最大值、中位值等)测定对应个别热点强度水平;及根据所述个别热点强度水平、所述主动脉参考强度水平及所述肝脏参考强度水平测定对应个别热点指标水平。
在某些实施例中,方法包括通过处理器基于一或多个经检测热点的至少一部分的个别热点指标值测定指示个体的癌症状态的总体指标值。
在某些实施例中,个体患有***癌或处于其风险下。
在某些实施例中,步骤(b)包括在3D解剖图像内自动鉴别包括个体的***的图形表示的第一***体积,在步骤(c)处测定的3D分段图进一步包含表示经鉴别的第一***体积的***掩模,步骤(e)包括在3D功能图像内自动鉴别对应于3D解剖图像内的第一鉴别***体积的第二***体积,步骤(f)包括自动检测第二***体积中的一或多个热点,且方法进一步包括:通过处理器,(i)基于定位于第二骨骼体积中的一或多个经检测热点的至少一部分的个别热点指标值测定指示个体的一或多个骨中的病变含量(例如,及严重程度)的总体骨指标值;及(ii)基于位于第二***体积中的一或多个经检测热点的至少一部分的个别热点指标值测定指示个体之***中的病变含量(例如,及严重程度)的总体***指标值。
在某些实施例中,个体患有转移癌(例如,转移性***癌、转移性乳癌、转移性肺癌及其它转移性骨癌)或处于其风险下。
在另一方面,本发明涉及一种用于自动处理不同大小的全身3D解剖图像集合以在各3D解剖图像内自动鉴别对应于特定目标组织区域的多个3D体积的方法,所述方法包括:(a)通过计算装置的处理器接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(MRI);例如超声波]所获得的一或多个个体的3D解剖图像集合,其中所述3D解剖图像包括所述一或多个个体中的每一者内的组织(例如,软组织和/或骨)的图形表示,其中所述3D解剖图像集合具有平均x维、平均y维及平均z维,其(所述平均x维、所述平均y维或所述平均z维)中的至少一者具有对应平均值的至少3%的标准差[例如,其(所述平均x维、所述平均y维或所述平均z维)中的至少一者具有至少3%、至少5%、至少10%、至少15%或至少20%的相对标准差];及(b)通过所述处理器,使用实施CNN的定位模块在所述3D解剖图像集合的各图像内自动测定至少一个对应于包括一或多个特定相关目标组织区域(例如一或多个特定骨,例如一或多个特定器官)的特定解剖区域(例如一组相关组织,例如骨盆区域及旋转区域)的初始VOI,借此鉴别对应3D解剖图像的至少一个初始VOI;及(c)针对各初始VOI,通过所述处理器,使用各自对与所述初始VOI对应的所述特定解剖区域相关的一或多个特定目标组织区域中的每一者实施CNN的一或多个分段模块来自动鉴别对应目标VOI(例如所述特定目标组织区域的图形表示)。
在另一方面,本发明涉及一种用于自动处理3D图像以鉴别所述3D图像内对应于特定目标组织区域的3D体积的***,所述***包括:计算装置的处理器;及在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:(a)接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(MRI);例如超声波]所获得的个体的3D解剖图像,其中所述3D解剖图像包括个体内的组织(例如,软组织和/或骨)的图形表示;(b)针对多个目标组织区域中的每一者,使用一或多个机器学习模块(例如,其中所述一或多个机器学习模块中的至少一者为卷积神经网络(CNN)模块)自动鉴别所述3D解剖图像内的对应目标所关注体积(VOI);(c)测定表示多个3D分段掩模的3D分段图,各3D分段掩模表示特定鉴别的目标VOI(例如,将所述多个3D分段掩模自动以数字方式拼接在一起以形成所述3D分段图);及(d)存储和/或提供所述3D分段图以用于显示和/或进一步处理。
在某些实施例中,3D解剖图像为全身图像。
在某些实施例中,在步骤(c)处,指令使处理器将多个3D分段掩模以数字方式拼接在一起以形成3D分段图{例如,通过创建最初的空图像体积(例如,将所有立体像素值初始化为零)且接着将标记从各分段掩模***到图像体积中[例如,通过将输入图像到一或多个机器学习模块的所标记(例如,作为表示如由机器学习模块测定的特定目标组织区域)立体像素映射到图像体积的立体像素(例如,以便将图像体积的立体像素与表示相同物理位置的输入图像的立体像素匹配,借此正确地标记图像体积的立体像素)]}。
在某些实施例中,在步骤(b)处,针对至少一个特定目标组织区域,指令使处理器:使用第一模块(例如,定位模块)(例如,第一机器学习模块)测定3D解剖图像内的初始VOI,所述初始VOI对应于解剖区域(例如一组相关组织,例如骨盆区域、胸部区域、头部和/或颈部区域及其类似者),所述解剖区域含有特定目标组织区域(例如,其中初始VOI会排除3D解剖图像中比其所包含更多的立体像素;例如,其中初始VOI包含3D解剖图像的小于25%的立体像素;例如,其中初始VOI内的大部分立体像素表示解剖区域内的物理体积);及使用第二模块(例如分段模块)(例如,第二机器学习模块)鉴别初始VOI内对应于特定目标组织区域的目标VOI。
在某些实施例中,第二模块为实施CNN的CNN模块。
在某些实施例中,第一模块为CNN模块,其实施CNN以执行粗略分段来自动鉴别对应于含有特定目标组织区域的解剖区域的初始VOI[例如,通过自动鉴别解剖图像内一组相关组织的图形表示(例如,且随后将初始VOI测定为完全包围所述组相关组织的经鉴别图形表示的矩形区域(例如,矩形柱或矩形框))][例如针对预期位于解剖区域内的一或多个特定组织区域中的每一者,通过自动鉴别解剖图像中的对应VOI(例如,经由粗略分段),例如且将初始VOI测定为完全包围对应于特定组织区域的所有经鉴别VOI的矩形区域]。
在某些实施例中,第一模块接收解剖图像的子采样[例如,利用沿着一或多个维度的两个或多于两个(例如四个)因素]版本作为输入,且使用解剖图像的子采样版本鉴别初始VOI[例如,且其中第二模块接收裁剪到初始VOI的解剖图像的全分辨率版本(例如,使得第一模块对表示物理体积比第二模块大的较低分辨率图像进行操作,而第二模块对较高分辨率但表示较小物理体积的图像进行操作)]。
在某些实施例中,第一模块为第一CNN模块且第二模块为第二CNN模块,且其中第一CNN模块包括额外滤波器以便解释图像大小相对于第二CNN模块增大的变化率。
在某些实施例中,3D解剖图像为全身图像且其中在步骤(b)处,指令使处理器:使用一或多个实施机器学习技术的定位模块(例如,其中各定位模块为实施CNN的CNN模块)自动测定3D解剖图像内的多个初始VOI,各初始VOI对应于特定解剖区域(例如一组相关组织,例如骨盆区域、胸部区域、头部和/或颈部区域、脊柱区域、上半身区域、下半身区域等)且目标VOI的相关子集位于其中;及针对各初始VOI,使用一或多个实施机器学习技术的分段模块(例如,其中各分段模块为实施CNN的CNN模块)自动鉴别目标VOI的相关子集。
在某些实施例中,多个初始VOI包括一或多个选自由以下组成的群组的成员:对应于个体的骨盆区域的骨盆区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:左髂骨和/或右髂骨、骶骨及尾骨);对应于个体的脊柱的脊柱区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:胸椎、腰椎及胸骨);对应于个体的上半身的左侧的左上半身区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:一或多个左肋、左肩胛骨及左锁骨);及对应于个体的上半身的右侧的右上半身区域初始VOI(例如,其中位于骨盆区域初始VOI中的目标VOI子集包括一或多个对应于选自由以下组成的群组的目标组织区域的目标VOI:一或多个右肋、右肩胛骨及右锁骨)。
在某些实施例中,指令使处理器:(e)接收使用功能成像模式[例如单光子发射计算机断层摄影术(SPECT);例如正电子发射断层摄影术(PET)]所获得的个体的3D功能图像[例如,其中3D功能图像包括多个立体像素,其各自表示个体内的特定物理体积且具有表示从特定物理体积发射的所检测辐射的强度值,其中3D功能图像的多个立体像素的至少一部分表示个体的目标组织区域中的一或多者内的物理体积];及(f)使用3D分段图在3D功能图像内鉴别一或多个各自对应于鉴别的目标VOI的3D体积(例如,通过将3D分段图的3D分段掩模映射到3D功能图像)。
在某些实施例中,指令使处理器:(g)测定个体的癌症状态[(例如***癌状态;例如转移癌状态(例如转移癌,包含例如转移性***癌、乳癌、肺癌、结肠癌、皮肤癌等))](例如,使用功能图像内的立体像素强度及一或多个经鉴别3D体积)(例如,基于经检测病变)[例如,个体患有和/或罹患***癌和/或特定阶段的***癌(例如,转移性***癌)的可能性][例如,个体患有和/或罹患转移癌(包含例如转移性***癌、乳癌、肺癌、结肠癌、皮肤癌等)的可能性]。
在某些实施例中,指令使处理器对在不同时间点采集的多个解剖及对应功能图像反复地执行步骤(a)至(g)以测定在各时间点个体的癌症状态,借此跟踪随时间推移的癌症状态(例如,评价疾病进展和/或治疗功效)。
在某些实施例中,指令使处理器(例如,在步骤(g)之前):(h)自动调节3D功能图像的立体像素强度以校正一或多个背景组织区域中的背景吸收(例如,放射性药品的吸收)(例如,校正在正常情形下发生在一或多个背景组织区域中且不必指示癌病变存在的放射性药品的吸收)。
在某些实施例中,目标组织区域包括一或多个背景组织区域且其中在步骤(h)处,指令使处理器:使用3D分段图以在3D功能图像内鉴别一或多个各自对应特定背景组织区域的3D背景组织体积(例如,通过将3D分段图的3D分段掩模映射到3D功能图像);及基于3D背景组织体积内的立体像素强度调节3D功能图像的立体像素强度(例如,通过使用3D背景组织体积内的立体像素强度来估计对3D背景组织体积外部的强度的贡献)。
在某些实施例中,一或多个背景组织区域包括一或多个选自由以下组成的群组的成员:膀胱(例如,膀胱)、肾脏、十二指肠、小肠、脾、肝脏、胰脏、胃、肾上腺、直肠及睪丸。
在某些实施例中,指令使处理器:(i)自动检测3D功能图像内的一或多个热点,所述热点基于3D功能图像内的立体像素强度[例如,基于3D功能图像内的强度与阈值的比较(例如,其中所述3D功能图像为3D PET图像且阈值为特定标准吸收值(SUV)水平)](例如,且还基于3D功能图像内鉴别的一或多个3D体积)经测定以表示病变。
在某些实施例中,在步骤(i)处,指令使处理器使用一或多个阈值[例如比较具有一或多个阈值的3D功能图像的立体像素强度(例如,其中一或多个阈值包括多个区域特定阈值,其各自用于3D功能图像内所鉴别的一或多个3D体积的特定子集)]。
在某些实施例中,在步骤(i)处,指令使处理器将一或多个滤波器应用于3D功能图像[例如,如同斑点检测技术;例如其中一或多个滤波器包括一或多个高斯滤波器(例如高通高斯滤波器及低通高斯滤波器,如同高斯差分方法);例如其中一或多个滤波器包括拉普拉斯滤波器(例如,如同高斯拉普拉斯技术);例如,其中不同滤波器核用于3D功能图像内所鉴别的一或多个3D体积的不同子集]。
在某些实施例中,在步骤(i)处,指令使处理器使用两种或多于两种技术的组合以鉴别3D功能图像内所鉴别的一或多个3D体积的不同子集中的热点[例如,针对一或多个3D体积的第一子集使用第一滤波方法(例如,如同段落[0096])且针对第二子集使用第二滤波方法;例如针对一或多个3D体积的第一子集使用定限方法(例如,如同段落[0095])且针对一或多个3D体积的第二子集使用滤波方法(例如,如同段落[0096])]。
在某些实施例中,在步骤(i)处,指令使处理器检测热点的初始集合,且针对初始集合的热点的至少一部分,将经检测热点的至少一部分的各热点分类为癌病变或非癌病变(例如,如噪声)[例如使用机器学习模块;例如基于热点的形状和/或位置(例如,结合解剖知识;例如,其中位置包含对应于热点位于其中的3D体积的特定目标组织区域的鉴别和/或特定目标组织区域内热点的相对位置);例如且从初始集合去除分类为非癌病变的热点,借此获得经测定以表示病变的热点的最终集合]。
在某些实施例中,目标组织区域包括一或多个背景组织区域且指令使处理器:使用3D分段图以在3D功能图像内鉴别一或多个各自对应特定背景组织区域(例如,其中显著的放射性药品吸收在正常情形下发生且不必指示癌病变存在的背景组织区域)的3D背景组织体积(例如,通过将3D分段图的3D分段掩模映射到3D功能图像);且从用于在步骤(i)处自动检测一或多个热点的立体像素中排除3D背景组织内的3D立体像素。
在某些实施例中,指令使处理器使用一或多个经检测热点(例如,一或多个经检测热点的强度)以测定个体的癌症状态。
在某些实施例中,目标组织区域包括一或多个参考组织区域且指令使处理器:使用3D分段图以在3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;测定一或多个参考强度值,其各自与一或多个3D参考体积的特定3D参考体积相关且对应于特定3D参考体积内的强度测量值(例如,平均值、中位值、最大值等);测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分的特定热点相关且对应于特定热点的强度测量值(例如,平均值、中位值、最大值等);及使用一或多个个别热点强度值及一或多个参考强度值测定一或多个个别热点指标值[例如,其中各个别热点指标值与经检测的一或多个热点的至少一部分的特定热点相关,且使用(i)与特定热点相关的个别热点强度值及(ii)一或多个参考强度值(例如,基于其之间的比较)来测定]。
在某些实施例中,指令使处理器通过将一或多个参考强度值中的每一者按一定比例映射到对应参考指标值,且针对各个别热点强度值,使用参考强度值及对应参考指标值以内插对应个别热点指标值来测定一或多个个别热点指标值。
在某些实施例中,参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)及腮腺。
在某些实施例中,第一参考强度值(i)为与对应于主动脉部分的3D参考体积相关的血液参考强度值,且(ii)映射到第一参考指标值;第二参考强度值(i)为与对应于肝脏的3D参考体积相关的肝脏参考强度值,且(ii)映射到第二参考指标值;以及第二参考强度值大于第一参考强度值且第二参考指标值大于第一参考指标值。
在某些实施例中,参考强度值包括映射到最大参考指标值的最大参考强度值,且其中具有大于最大参考强度值的相关热点强度值的热点经分配等于最大参考指标值的热点指标值。
在某些实施例中,指令使处理器使用一或多个热点指标值的至少一部分测定指示个体的癌症状态的总体指标值。
在某些实施例中,总体指标值测定为个别热点指标值的至少一部分[例如,位于对应于个体的骨骼区域的功能图像的3D体积内;例如位于对应于个体的淋巴区域的功能图像的3D体积内]的加权和[例如,其中各热点指标值的总和由相关热点的大小测量值(例如3D体积;例如平均直径)加权]。
在某些实施例中,总体指标值与解剖图像内所鉴别的对应于特定目标VOI的特定目标组织区域相关;且总体指标值是使用位于3D功能图像中对应于特定鉴别目标VOI的特定3D体积内的热点子集的热点指标值来测定[例如,且其中总体指标值计算为热点子集的热点指标值的加权和(例如,其中加权和由特定目标组织区域的估计体积标准化(例如,计算为功能图像中特定3D体积的体积和/或特定目标VOI的体积))]。
在某些实施例中,特定目标组织区域是选自由以下组成的群组:包括个体的一或多个骨的骨骼区域、淋巴区域及***区域。
在某些实施例中,3D解剖图像为x射线计算机断层摄影术(CT)图像,且3D功能图像为3D单光子发射计算机断层摄影术(SPECT)图像。
在某些实施例中,3D解剖图像为x射线计算机断层摄影术(CT)图像,且3D功能图像为3D正电子发射断层摄影术(PET)图像。
在某些实施例中,在向个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得个体的3D PET图像。
在某些实施例中,放射性药品包括[18F]DCFPyL。
在某些实施例中,在步骤(b)处,指令使处理器裁剪3D解剖图像以去除表示空气的立体像素[例如创建经裁剪的解剖图像,且使用经裁剪的解剖图像以鉴别一或多个目标VOI(例如,使用经裁剪的解剖图像作为输入用于一或多个机器学习模块,与原始大小的3D解剖图像相反)]。
在某些实施例中,目标组织区域包括一或多个选自由以下组成的群组的成员:左髋骨、右髋骨、骶骨及尾骨区域、左锁骨、右锁骨、左肋、右肋、左肩胛骨、右肩胛骨、胸骨、腰椎、胸椎、颅骨、颈椎、左股骨、右股骨、左肱骨、右肱骨、***、膀胱、直肠、左臀大肌、右臀大肌、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)、左肾脏、右肾脏、肝脏、左肺、右肺、脾、脑室、左肾上腺、右肾上腺、胆囊、大脑、胰脏、心脏、下颌骨、左支气管、右支气管、气管、左髂总动脉、右髂总动脉及腮腺。
在某些实施例中,目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左股骨、右股骨、左腓骨、右腓骨、左髋骨、右髋骨、左肱骨、右肱骨、下颌骨、左髌骨、右髌骨、左桡骨、右桡骨、左胫骨、右胫骨、左尺骨、右尺骨、左肋(例如,第一左肋、第二左肋、第三左肋、第四左肋、第五左肋、第六左肋、第七左肋、第八左肋、第九左肋、第十左肋、第十一左肋、第十二左肋)、右肋(例如,第一右肋、第二右肋、第三右肋、第四右肋、第五右肋、第六右肋、第七右肋、第八右肋、第九右肋、第十右肋、第十一右肋、第十二右肋)、骶骨及尾骨(例如,经合并的骶骨及尾骨区域;例如单独地骶骨及尾骨,以便区分两者)、左肩胛骨、右肩胛骨、颅骨、胸骨、脊椎骨区域[例如颈椎区域,包括一或多个(例如到多所有)颈椎;例如腰椎区域,包括一或多个(例如至多所有)腰椎;例如胸椎区域,包括一或多个(例如至多所有)胸椎],及个别脊椎骨[例如个别颈椎(例如,第一颈椎、第二颈椎、第三颈椎、第四颈椎、第五颈椎、第六颈椎、第七颈椎);例如个别腰椎(例如,第一腰椎、第二腰椎、第三腰椎、第四腰椎、第五腰椎、第六腰椎);例如个别胸椎(例如,第一胸椎、第二胸椎、第三胸椎、第四胸椎、第五胸椎、第六胸椎、第七胸椎、第八胸椎、第九胸椎、第十胸椎、第十一胸椎、第十二胸椎)]。
在某些实施例中,目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左髋骨、右髋骨、左肋(例如,第一左肋、第二左肋、第三左肋、第四左肋、第五左肋、第六左肋、第七左肋、第八左肋、第九左肋、第十左肋、第十一左肋、第十二左肋)、右肋(例如,第一右肋、第二右肋、第三右肋、第四右肋、第五右肋、第六右肋、第七右肋、第八右肋、第九右肋、第十右肋、第十一右肋、第十二右肋)、骶骨及尾骨(例如,经合并的骶骨及尾骨区域;例如单独地骶骨及尾骨,以便区分两者)、左肩胛骨、右肩胛骨、胸骨、脊椎骨区域[例如颈椎区域,包括一或多个(例如至多所有)颈椎;例如腰椎区域,包括一或多个(例如至多所有)腰椎;例如胸椎区域,包括一或多个(例如至多所有)胸椎],及个别脊椎骨[例如个别腰椎(例如,第一腰椎、第二腰椎、第三腰椎、第四腰椎、第五腰椎);例如个别胸椎(例如,第一胸椎、第二胸椎、第三胸椎、第四胸椎、第五胸椎、第六胸椎、第七胸椎、第八胸椎、第九胸椎、第十胸椎、第十一胸椎、第十二胸椎)]。
在某些实施例中,目标组织区域中的一或多者包括一或多个选自由以下组成的群组的软组织区域(例如器官):左肾上腺、右肾上腺、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)、大脑、左支气管、右支气管、胆囊、左臀大肌、右臀大肌、心脏、左髂总动脉、右髂总动脉、左肾脏、右肾脏、肝脏、左肺、右肺、胰脏、***、直肠、脾、气管、膀胱、脑室及腮腺。
在某些实施例中,一或多个目标组织区域包括一或多个选自由以下组成的群组的软组织区域(例如器官):胆囊、左肾脏、右肾脏、肝脏、左肺、右肺、***及膀胱。
在某些实施例中,目标组织区域包括一或多个骨区域,其各自对应于特定骨[例如,其中目标组织区域包括段落[0116]或[0117]中所列的至少一部分(例如,至多所有)骨];及一或多个软组织区域,其各自对应于特定软组织区域[例如,其中目标组织区域包括段落[0118]或[0119]中所列的至少一部分(例如,至多所有)软组织区域]。
在另一方面,本发明涉及一种用于自动处理3D图像以自动鉴别个体内的癌病变的***,所述***包括:计算装置的处理器;及在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:(a)接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(MRI);例如超声波]所获得的个体的3D解剖图像,其中所述3D解剖图像包括个体内的组织(例如,软组织和/或骨)的图形表示;(b)针对多个目标组织区域中的每一者,使用一或多个机器学***)]经测定以表示病变。
在某些实施例中,指令使处理器使用一或多个经检测热点(例如,一或多个经检测热点的强度)以测定个体的癌症状态。
在某些实施例中,目标组织区域包括一或多个参考组织区域且其中指令使处理器:使用3D分段图以在3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;测定一或多个参考强度值,其各自与一或多个3D参考体积的特定3D参考体积相关且对应于特定3D参考体积内的强度测量值(例如,平均值、中位值、最大值等);测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分的特定热点相关且对应于特定热点的强度测量值(例如,平均值、中位值、最大值等);及使用一或多个个别热点强度值及一或多个参考强度值测定一或多个个别热点指标值[例如,其中各个别热点指标值与经检测的一或多个热点的至少一部分的特定热点相关,且使用(i)与特定热点相关的个别热点强度值及(ii)一或多个参考强度值(例如,基于其之间的比较)来测定]。
在某些实施例中,参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)及腮腺。
在某些实施例中,指令使处理器使用一或多个热点指标值的至少一部分测定指示个体的癌症状态的总体指标值。
在某些实施例中,总体指标值测定为个别热点指标值的至少一部分[例如,位于对应于个体的骨骼区域的功能图像的3D体积内;例如位于对应于个体的淋巴区域的功能图像的3D体积内]的加权和[例如,其中各热点指标值的总和由相关热点的大小测量值(例如3D体积;例如平均直径)加权]。
在某些实施例中,3D解剖图像为x射线计算机断层摄影术(CT)图像,且3D功能图像为3D正电子发射断层摄影术(PET)图像。
在某些实施例中,在向个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得个体的3D PET图像。
在某些实施例中,放射性药品包括[18F]DCFPyL。
在另一方面,本发明涉及一种用于自动处理3D图像以鉴别及测量放射性药品在患有癌症(例如,***癌、乳癌、肺癌;例如转移癌,例如转移性***癌、转移性乳癌、转移性肺癌)或处于其风险下的个体内的癌病变(例如,癌转移)中的吸收的***,所述***包括:计算装置的处理器;及在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:(a)接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(MRI);例如超声波]所获得的个体的3D解剖图像,其中所述3D解剖图像包括个体内的组织(例如,软组织和/或骨)的图形表示;(b)使用一或多个机器学***均值、最大值、中位值等)测定主动脉参考强度水平;基于所述第二肝脏体积内立体像素的强度测量值(例如,平均值、最大值、中位值等)测定肝脏参考强度水平;且针对各个别经检测热点:基于经检测热点的立体像素的强度测量值(例如,平均值、最大值、中位值等)测定对应个别热点强度水平;及根据个别热点强度水平主动脉参考强度水平及肝脏参考强度水平测定对应个别热点指标水平。
在某些实施例中,指令使处理器基于一或多个经检测热点的至少一部分的个别热点指标值测定指示个体的癌症状态的总体指标值。
在某些实施例中,个体患有***癌或处于其风险下。
在某些实施例中,指令使处理器:在步骤(b)处,在3D解剖图像内自动鉴别包括个体之***的图形表示的第一***体积;在步骤(c)处,包含表示所测定的3D分段图中经鉴别的第一***体积的***掩模;在步骤(e)处,在3D功能图像内自动鉴别对应于3D解剖图像内的第一鉴别***体积的第二***体积;在步骤(f)处,自动检测第二***体积中的一或多个热点;且(i)基于位于第二骨骼体积中的一或多个经检测热点的至少一部分的个别热点指标值测定指示个体的一或多个骨中的病变含量(例如,及严重程度)的总体骨指标值;及(ii)基于位于第二***体积中的一或多个经检测热点的至少一部分的个别热点指标值测定指示个体的***中的病变含量(例如,及严重程度)的总体***指标值。
在某些实施例中,个体患有转移癌(例如,转移性***癌、转移性乳癌、转移性肺癌及其它转移性骨癌)或处于其风险下。
在另一方面,本发明涉及一种用于自动处理不同大小的全身3D解剖图像集合以在各3D解剖图像内自动鉴别对应于特定目标组织区域的多个3D体积的***,所述***包括:计算装置的处理器;及在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:(a)接收使用解剖成像模式[例如x射线计算机断层摄影术(CT);例如磁共振成像(MRI);例如超声波]所获得的一或多个个体的3D解剖图像集合,其中3D解剖图像包括一或多个个体中的每一者内的组织(例如,软组织和/或骨)的图形表示,其中3D解剖图像集合具有平均x维、平均y维及平均z维,其(平均x维、平均y维或平均z维)中的至少一者具有对应平均值的至少3%的标准差[例如,其(平均x维、平均y维或平均z维)中的至少一者具有至少3%、至少5%、至少10%、至少15%或至少20%的相对标准差];及(b)使用实施CNN的定位模块在3D解剖图像集合的各图像内自动测定对应于特定解剖区域(例如一组相关组织,例如骨盆区域及旋转区域)的至少一个初始VOI,所述特定解剖区域包括一或多个特定相关目标组织区域(例如一或多个特定骨,例如一或多个特定器官),借此鉴别对应3D解剖图像的至少一个初始VOI;及(c)针对各初始VOI,使用各自对与初始VOI对应的特定解剖区域相关的一或多个特定目标组织区域中的每一者实施CNN的一或多个分段模块来自动鉴别对应目标VOI(例如特定目标组织区域的图形表示)。
关于本发明的另一方面,可应用关于本发明的一个方面所描述的实施例的特征。
附图说明
通过结合附图参考以下描述,本发明的前述及其它目的、方面、特征及优势将变得更为显而易见且更好理解,在所述附图中:
图1为展示根据一说明性实施例的不同成像模式与人工智能(AI)平台的整合的图式。
图2为展示根据一说明性实施例的具有所鉴别的不同特定骨的个体的骨架的图像。
图3为展示根据一说明性实施例的将不同功能成像模式中的全身分段用于不同应用的框图。
图4为展示根据一说明性实施例的利用AI模块分类、定位及定量癌病变的不同信息数据集的处理流程的图式。
图5A为根据一说明性实施例的用于自动处理3D图像以鉴别3D图像内对应于特定目标组织区域的3D体积的工艺的方框流程图。
图5B为根据一说明性实施例的用于自动处理3D图像以鉴别3D体积且使用3D体积检测表示癌病变的热点的工艺的方框流程图。
图6A为根据一说明性实施例的用于自动处理全身分段的CT图像的工艺的方框流程图。
图6B为展示图6A中所展示的工艺的不同步骤的处理结果的CT图像集合。
图7为根据一说明性实施例的三种图像的集合,所述图像用作用于分段CT图像的机器学习模块的训练数据。
图8为两种图像的集合,其中经鉴别的所关注体积经重迭。
图9A为在投予PyLTM后,从个体获得的3D PET/CT图像的2D视图集合。
图9B为在背景校正后与图9A中所展示相同的2D视图集合。
图9C为在投予PyLTM后,从个体获得的3D PET/CT图像的2D视图集合。
图9D为在背景校正后与图9C中所展示相同的2D视图集合。
图10A为展示根据一说明性实施例的用于分析PyLTM-PET图像的实例工艺的方框流程图。
图10B为在向个体投予PyLTM后所获得的PET/CT图像。
图10C为展示经由本文中所描述的机器学习方法鉴别的所关注体积的两种CT图像集合。
图10D为说明根据一说明性实施例的PET图像的背景校正的3种图像集合。
图11A为根据一说明性实施例的3D CT图像的视图,其中所关注体积对应于用颜色标记的特定骨。
图11B为图11A中所展示的具有经标记所关注体积的3D CT图像的另一视图。
图12为展示鉴别的背景组织区域的具有经重迭PET图像的CT图像。
图13A为展示经检测病变的具有经重迭PET图像的CT图像的视图。
图13B为展示经检测病变的具有图13A的经重迭PET图像的CT图像的另一视图。
图13C为展示经检测病变的具有图13A的经重迭PET图像的CT图像的另一视图。
图13D为展示经检测病变的具有图13A的经重迭PET图像的CT图像的另一视图。
图14A为在对个体投予PyLTM后所获得的具有经重迭PET图像的CT图像的两种视图集合。
图14B展示与图14A相同的视图,但经由本文中所描述的机器学习方法处理后,提供背景校正及病变的检测。
图15A为在对个体投予PyLTM后所获得的具有经重迭PET图像的CT图像的两种视图集合。
图15B展示与图15A相同的视图,但经由本文中所描述的机器学习方法处理后,提供背景校正及病变的检测。
图16A为3D CT图像的视图,其中经鉴别的所关注体积经重迭。
图16B为图16A中所展示的3D CT图像的另一视图,其中经鉴别的所关注体积经重迭。
图17为用于某些实施例中的示范性云端计算环境的框图。
图18为用于某些实施例中的实例计算装置及实例移动计算装置的框图。
图19为根据一说明性实施例的三种图的集合,各图展示基于六种不同癌症适应症的PET/CT图像分析定量在特定组织区域中所鉴别的病变中PyLTM-PSMA吸收的总体指标值。
图20为根据一说明性实施例的图,其展示经由PET/CT图像分析针对在三个不同组织区域(骨、淋巴及***)中所检测的病变所测定的个别病变PSMA指标(LPI)值。
图21为根据一说明性实施例的两种图的集合,所述两种图比较经由血池参考值及肝脏参考值的手动及自动图像分析所测定的参考值。
根据下文结合图式所阐述的详细描述,本发明的特征及优势将变得更显而易见,在所述图式中相似参考字符始终识别对应元件。在图式中,相似参考数字通常指示相同、功能上类似和/或结构上类似的元件。
具体实施方式
预期所要求的本发明的***、架构、装置、方法及工艺涵盖使用来自本文中所描述的实施例的信息所进行的变化及调适。如此描述所涵盖,可执行本文中所描述的***、架构、装置、方法及工艺的调适和/或修改。
在整个实施方式中,当物品、装置、***及架构描述为具有、包含或包括特定组分时,或当工艺及方法描述为具有、包含或包括特定步骤时,预期另外存在基本上由所列举的组分组成或由其组成的本发明的物品、装置、***及架构,且存在基本上由所列举的处理步骤组成或由其组成的根据本发明的工艺及方法。
应理解,步骤次序或执行某一动作的次序并不重要,只要本发明保持可操作即可。此外,可同时进行两个或多于两个步骤或动作。
关于本文中所提出的权利要求书中的任一权利要求,本文中提及的任何公开案(例如在现有技术部分中)不允许公开案充当现有技术。现有技术部分是出于清楚起见而提出,且并不意谓作为对关于任何权利要求书的现有技术的描述。
如所指示,文档以引用的方式并入本文中。当特定术语的含义存在任何差异时,以上述定义部分中所提供的含义为准。
标头是为了方便读者而提供-标头的存在和/或放置不打算限制本文所描述的主题的范围。
i.定义
如本文中所使用,“放射性核种”是指包括至少一种元素的放射性同位素的部分。合适的示范性放射性核种包含(但不限于)本文中所描述的那些。在一些实施例中,放射性核种为用于正电子发射断层摄影术(PET)中的一者。在一些实施例中,放射性核种为用于单光子发射计算机断层摄影术(SPECT)中的一者。在一些实施例中,放射性核种的非限制性清单包含99mTc、111In、64Cu、67Ga、68Ga、186Re、188Re、153Sm、177Lu、67Cu、123I、124I、125I、126I、131I、11C、13N、15O、18F、153Sm、166Ho、177Lu、149Pm、90Y、213Bi、103Pd、109Pd、159Gd、140La、198Au、199Au、169Yb、175Yb、165Dy、166Dy、105Rh、111Ag、89Zr、225Ac、82Rb、75Br、76Br、77Br、80Br、80mBr、82Br、83Br、211At及192Ir。
如本文中所使用,术语“放射性药品”是指包括放射性核种的化合物。在某些实施例中,放射性药品用于诊断和/或治疗目的。在某些实施例中,放射性药品包含经一或多种放射性核种标记的小分子、经一或多种放射性核种标记的抗体及经一或多种放射性核种标记的抗体的抗原结合部分。
如本文中所使用,关于“图像”的“3D”或“三维”意谓关于三维的传递信息。3D图像可以三维的数据集呈现和/或可以二维表示的集合或以三维表示显示。
如本文中所使用,“图像”(例如个体的3D图像)包含任何视觉表示,例如像片、视频框、流式传输视频以及像片、视频框或流式传输视频的任何电子、数字或数学类似物。在某些实施例中,本文中所描述的任何设备包含用于显示图像或由处理器产生的任何其它结果的显示器。在某些实施例中,本文中所描述的任何方法包含显示图像或通过所述方法产生的任何其它结果的步骤。
如本文中所使用,“个体”意谓人类或其它哺乳动物(例如,啮齿动物(小鼠、大鼠、仓鼠)、猪、猫、狗、马、灵长类动物、兔及其类似者)。
如本文中所使用,“投予”试剂意谓将物质(例如成像剂)引入到个体中。大体而言,可利用任何投予途径,包括例如非经肠(例如静脉内)、经口、局部、皮下、腹膜、动脉内、吸入、经***、经直肠、经鼻、引入到脑脊髓液中或滴注到身体区室中。
如本文中所使用,术语“滤波器(filter)”及“滤波(filtering)”(如同“滤波函数”或“滤波器(filter)”)是指对数据(例如图像数据,例如由CNN层计算的值)的输入阵列(例如,多维阵列)的局部化部分进行操作的函数,在本文中称作“子块(subpatch)”,从而针对既定子块计算响应值。大体而言,在整个阵列中以滑动窗方式应用滤波器以计算阵列的多个响应值。特定地说,针对既定多维阵列,阵列的子块可为具有特定大小(例如,具有与阵列相同数目的维度)的阵列的矩形区域。举例来说,针对6×3×3阵列,既定3×3×3子块是指阵列的相邻值(例如,邻域)的既定3×3×3集合,使得在6×3×3阵列中存在五个不同3×3×3子块(各块沿第一维度偏移一个位置)。
举例来说,针对阵列的既定子块,滤波函数可使用子块的值计算响应值。可以滑动窗方式在整个阵列中应用滤波函数,从而针对阵列的多个子块中的每一者计算响应值。所计算的响应值可存储于输出阵列中以便维持响应值与输入阵列的子块之间的位置对应关系。
举例来说,在第一步骤,以输入阵列的拐角中的子块开始,滤波器可计算第一响应值,且将第一响应值存储于输出阵列的对应拐角中。在某些实施例中,在第二步骤,滤波器随后计算第二子块的第二响应值,所述第二子块沿输入阵列的特定维度偏移一个位置。第二响应值可存储于输出阵列的对应位置(即,沿输出阵列的相同维度偏移一个位置)中。对于完整输入阵列,可沿输入阵列的各维度重复以下步骤:偏移子块的位置;计算响应值且将响应值存储于输出阵列的对应位置中。在某些实施例(例如跨步滤波方法)中,滤波器计算其响应值的子块每次沿既定维度偏移多于一个位置,使得并不针对输入阵列的每个可能子块计算响应值。
如本文中所使用,术语“卷积神经网络(CNN)”是指其中至少一个层执行一或多个滤波函数的人工神经网络类型。如本文中所使用,术语“卷积层”是指接收作为输入的输入阵列且计算输出阵列的CNN层,其中输出阵列的值通过将一或多个滤波器应用于输入阵列来计算。特定地说,在某些实施例中,卷积层接收作为输入的具有n+1维的输入阵列且产生亦具有n+1维的输出阵列。操作于CNN的滤波层上的输入及输出阵列的前n个维度在本文中称作“空间维度”。输入的第(n+1)个维度在本文中称作“输入通道”维度。输入通道维度的大小在本文中称作“输入通道的数目”。输出的第(n+1)个维度在本文中称作”“输出通道”维度。输入通道维度的大小在本文中称作“输出通道的数目”。
在某些实施例中,卷积层通过应用滤波器来计算响应值,所述滤波器对沿空间维度小于输入阵列但延伸跨越全部输出通道维度的子块进行操作。举例来说,N×M×L×K0大小的输入阵列具有三个空间维度及K0个输出通道。卷积层的滤波器可对具有Nf×Mf×Lf×K0的大小的子块进行操作,其中Nf≤N,Mf≤M且Lf≤L。通常,卷积层的滤波器对具有其中Nf<N,Mf<M和/或Lf<L的大小的子块进行操作。举例来说,在某些实施例中,Nf<<N,Mf<<M和/或Lf<<L。
因此,对于卷积层所应用的一或多个滤波器中的每一者,由既定滤波器计算的响应值存储于对应输出通道中。因此,接收具有n+1个维度的输入阵列的卷积层计算也具有n+1个维度的输出阵列,其中第(n+1)个维度表示对应于卷积层所应用的一或多个滤波器的输出通道。在此方式中,由既定卷积层计算的输出阵列可由后续卷积层接收以作为输入。
如本文中所使用,关于卷积层的滤波器的术语“大小”是指沿滤波器所操作的子块的空间维度的大小(例如,将沿输出通道维度的子块大小视为输出通道的全部数目)。如本文中所使用,关于卷积层的术语“大小”(如同“卷积层的大小”)是指卷积层的滤波器大小(例如,卷积层的各滤波器具有相同大小)。在某些实施例中,卷积层的滤波器具有多个经由机器学习训练程序测定的可变参数。在某些实施例中,既定滤波器的参数数目等于既定滤波器所操作的子块中的值数目。举例来说,在具有K0个输出通道的输入阵列上操作的大小Nf×Mf×Lf滤波器具有Nf×Mf×Lf×K0参数。在某些实施例中,滤波器实施为阵列,且由滤波器针对既定子块测定的响应值经计算为滤波器与既定子块之间的点积。
如本文中所使用,术语“全卷积神经网络(fully convolutional neuralnetwork;FCNN)”是指其中CNN的各层为卷积层的CNN。
如本文中所使用,如关于CNN层的输入或输出所使用的术语“体积”是指由CNN层接收的输入阵列或由其计算的输出阵列。
如本文中所使用,术语“CNN模块”是指计算机实施程序,其实施特定CNN以便测定既定输入,例如图像(例如2D图像;例如3D图像)的一或多个输出值。举例来说,CNN模块可接收个体的3D图像(例如CT图像;例如MRI)作为输入,且针对图像的各立体像素,测定一值,所述值表示立体像素位于对应于个体的特定器官或组织的表示的3D图像的区域内的可能性。CNN模块可为软件和/或硬件。举例来说,CNN模块可完全以软件形式来实施或CNN模块的某些功能可经由专用硬件(例如,经由集成电路专用集成电路(application specificintegrated circuit;ASIC))来实行。
如本文中所使用,术语“组织”是指骨(骨性组织)以及软组织。
在某些实施例中,本文中所描述的方法可用于分段及鉴别个体的全身图像内的目标组织区域。如本文中所使用,在分段的情形中(互换)使用的术语“全身(full body/wholebody)”是指评价个体身体在3D解剖图像中的大部分(例如,大于50%)的图形表示以鉴别目标组织所关注区域的方法。在某些实施例中,全身分段是指对个体的至少整个躯干内的目标组织区域的鉴别。在某些实施例中,还包含肢体的部分以及个体的头部。
A.经由核医学成像及自动图像分段检测及评估癌症状态
本文描述提供基于人工智能(AI)的分段技术的***及方法,所述分段技术提供用于检测、评价及预测关于个体的癌症状态的基础。特定地说,本文中所描述的基于AI的分段技术允许精确地及快速地鉴别不同组织区域于医学图像中的3D表示。本文中所描述的基于AI的分段技术利用机器学习技术,例如卷积神经网络(CNN)来自动鉴别多个目标3D所关注体积(VOI),其各自对应于特定目标组织区域,例如一或多个器官、器官的部分、特定骨、骨骼区域等。各个鉴别的3D VOI可经由分段掩模表示。可将鉴别患者整个身体中的多个目标组织区域的多个分段掩模拼接在一起以形成分段图。分段图和/或其包括的不同分段掩模可用于根据医学图像计算不同量,例如充当测量和/或预测癌症状态、进展及对治疗的反应的有用指标。分段图及掩模还可显示(例如以医学图像上重迭的图形表示)以指导医师及其它医学从业者。
在某些实施例中,使用提供关于个体身体内的组织的位置及范围的详细结构信息的解剖图像来执行基于AI的分段。解剖图像的实例包含(但不限于)x射线计算机断层摄影术(CT)图像、磁共振图像(MRI)及超声波。解剖图像中的图像对比度为皮下组织的物理特性,例如密度、水及脂肪含量的函数。如本文中进一步详细描述,本发明的基于AI的分段技术分析解剖图像中的对比度变化及图案以鉴别对应于不同特定目标组织区域的目标3DVOI。
在某些实施例中,来自解剖图像的结构信息及经鉴别的目标VOI与经由功能成像模式所获得的图像组合和/或用于分析所述图像。功能图像反映个体的生理学特性及活性。其通常使用探针获得且具有反映探针在个体的成像部分内的空间分布的强度变化。举例来说,核医学图像(例如PET扫描;例如SPECT扫描;例如全身扫描;例如复合PET-CT图像;例如复合SPECT-CT图像)检测从放射性药品的放射性核种发射的辐射以形成图像。特定放射性药品在患者内的分布可通过生物机制(例如血流或灌注)以及通过特异性酶促或受体结合相互作用来测定。不同放射性药品可经设计以利用不同生物机制和/或特定特异性酶促或受体结合相互作用,且因此在向患者投予时,选择性地集中在患者内的特定类型组织和/或区域内。较大的辐射量从患者体内具有比其它区域更高浓度的放射性药品的区域发射,使得这些区域在核医学图像中看起来更亮。因此,核医学图像内的强度变化可用于映射放射性药品在患者体内的分布。放射性药品在患者体内的此映射分布可用于例如推断患者身体的不同区域内癌组织的存在。
将分段图传送到功能图像(例如核医学图像,例如PET图像或SPECT图像)提供有价值内容以评价且推导根据功能图像中强度波动的含义。特定地说,其允许将功能图像的区域鉴别为对应于个体的特定组织区域。在此方式中,因此可将特定区域内的立体像素的强度值及波动理解为源自放射性药品在个体的特定组织区域(例如,器官或骨)中的潜在积累。
如本文中进一步详细描述,此解剖内容适用多种用途。举例来说,其允许测量待评估的不同特定目标器官及组织区域(例如***、***及骨)中的放射性药品吸收,且用作其中癌组织存在的指示符。鉴别功能图像的特定区域强度与什么相关还允许在适当背景下对其进行评价。举例来说,特定值的强度如果与***区域相关,那么可比在另一器官(例如膀胱或肾脏)内发现的相同值的强度更有可能指示癌症。在某些实施例中,参考区域经鉴别且用于计算呈一定比例的标准化值及水平,其它区域中的强度与其进行比较以评价癌症状态。也可鉴别从图像排除或用于校正伪影的背景区域。
因此,本文中所描述的基于AI的分段方法可充当一平台,在所述平台上可构建用于检测、评价及预测患者的癌症状态的多种工具及技术。此外,由于本文中所描述的基于AI的分段工具可鉴别患者的整个身体的多个重要组织区域,且随后将那些鉴别(例如,分段图)从解剖图像转印到不同功能图像,其可用作基于多种不同成像方法的分析技术的构建块,所述分析技术经由多种不同放射性药品获得对比度。
图1至3说明此概念。特定地说,图1为说明在平台中立性基于AI的分段技术的背景中可如何整合不同解剖及功能成像模式的示意图。如图1中所说明,本文中所描述的AI分段平台可用作用于分析多种图像,例如解剖CT图像本身、18NaF图像、C-11图像、Ga-68图像、FDG图像及PyLTM图像的基础。图2展示对个体的骨架执行的实例分段的结果,其中不同特定骨骼由不同颜色鉴别。可将图2中所展示的使用CT图像执行的分段转印到功能图像以便鉴别功能图像中对应于CT图像内鉴别的目标VOI的3D体积。其它VOI(例如软组织)也可鉴别且用于鉴别功能图像中的对应3D体积。举例来说,图3为方框流程图,其说明可如何使用不同软组织及骨区域基于解剖图像(例如,CT图像)的分段且使用不同探针(例如,99mTc-MIP-1404、18F-PyL、68Ga-PSMA-11、18F-NaF、11C-胆碱、[18F]FDG、[18F]FACBC等)将其映射到经由不同功能成像模式所获得的图像以执行基于图像的对疾病进展、状态及其类似者的诊断及评估。如图3中所展示,本文中所描述的全身分段技术可充当一平台,可在所述平台上充分利用且构建利用不同功能成像模式及探针的多种特殊应用图像分析技术。
图4为展示可如何执行基于人工智能的图像分析400以分类且定位病变以及定量阳性病变,例如用于评估个体的癌症状态的图式。如图4中所展示,机器学习模块402(例如卷积神经网络(CNN))接收处境解剖信息(例如,CT图像或其它解剖成像模式)404以及功能信息(例如功能图像,例如SPECT、PET或使用特定成像探针所获得的其它功能图像)406。随后机器学习模块402使用功能406及解剖404信息以鉴别、分类和/或定量个体的癌病变410。机器学习模块402也可充分利用额外信息408,例如个体人口统计数据(例如,年龄、重量等)及其它诊断测试结果(例如,组织切片检查、格里森评分(Gleason score)、基因测试结果、***特异性抗原(PSA)测试结果)、临床治疗(例如,外光束辐射、近距放射疗法、***切除术、抗雄激素、免疫疗法(例如,普列威(Provenge))、化学疗法等)作为输入且还基于此额外信息分类、鉴别和/或定量癌病变。
图5为展示用于执行分段以鉴别多个目标组织区域的实例工艺500的方框流程图。如图5中所展示,机器学习模块接收3D解剖图像(例如,全身图像)作为输入502,且针对多个目标组织区域中的每一者,鉴别3D解剖图像内包括目标组织区域的图形表示的目标体积504。将目标体积拼接在一起506以形成包括多个分段掩模512的分段图510,其中各分段掩模表示经鉴别的目标体积。可存储和/或提供分段图510以用于显示和/或其它处理508。
i.使用卷积神经网络(CNN)的图像分段
在某些实施例中,本文中所描述的基于AI的图像分段方法利用机器学习技术(例如CNN)以执行分段。如本文中所描述,一或多个机器学习模块可用于执行图像的中间分析及处理,且最终鉴别目标VOI。
在某些实施例中,本文中所描述的基于AI的图像分段利用两步方法以鉴别解剖图像中表示目标组织所关注区域的3D目标VOI中的一或多者。在此两步方法中,首先鉴别包括目标VOI中的一或多者的初始所关注体积(VOI)。初始VOI可使用第一模块(称作定位模块)来鉴别。定位模块可为第一机器学习模块,例如第一卷积神经网络(CNN)模块。在鉴别初始VOI后,第二模块(称作分段模块[例如,实施第二机器学习网络(例如第二CNN)以执行精细分段])用于鉴别初始VOI内的一或多个目标VOI。此方法为有利的,因为允许分段模块在可管理大小的标准化输入上操作,而不考虑所接收的原始解剖图像的尺寸及边界的变化。此两步方法尤其适用于在较大图像(例如全身扫描)内执行对组织区域的精确、经精细解析的分段。定位模块可执行粗分析,例如通过执行粗略分段以鉴别初始VOI。无需适应不同图像大小且分析整个图像,分段模块可投入资源以执行精细分段从而精确地鉴别初始VOI内的目标VOI。
此外,如本文中进一步详细描述,例如在实例1中,为鉴别在个体的整个身体内扩展的目标VOI集合,可鉴别多个初始VOI以便将全身图像分割成多个可管理初始VOI,其各自包包括待鉴别的所需目标VOI的子集。将全身图像分割成多个初始VOI可使用单个定位模块,例如执行粗略分段以鉴别一般解剖区域(例如上半身、下半身、脊柱及骨盆区域)的机器学习模块来执行。在某些实施例中,可使用多个定位模块(例如,各自委以鉴别一或多个初始VOI的任务)。针对各个经鉴别的初始VOI,随后可使用一或多个分段模块以执行精细分段且鉴别初始VOI内的一或多个所需目标VOI。
不同定位及分段模块可经组合且实施为单个模块和/或单个软件应用,或可经单独地实施为例如独立软件应用。
多个不同方法可由定位模块使用以鉴别特定初始VOI。举例来说,在一种方法中,定位模块可实施接收灰阶CT图像(例如,单个输入通道)作为输入且输出矩形VOI(例如,限界框(bounding box))的对置边角的坐标的CNN。在另一方法中,定位模块可实施接收以下两种输入通道的CNN:(i)灰阶CT图像及(ii)CT图像的预处理版本。CT图像的预处理版本可为CT图像的阈值版本,其中定限提供待鉴别的初始VOI的粗鉴别。CNN经训练以分析两个这些输入通道以便输出表示矩形初始VOI(例如,限界框)的对置边角的坐标。
在第三种方法中,为鉴别包括一或多个特定目标VOI的特定初始VOI,定位模块执行粗略分段以粗略地鉴别特定目标VOI。在此方式中,定位模块基本上为用于鉴别特定初始VOI内的特定目标VOI的分段模块的粗略版本。随后,矩形初始VOI使用粗略鉴别的特定目标VOI(例如,通过绘制适合其的最小框,或可添加一定缓冲距离)来产生。此处的区别为在此情况下定位模块的输出不仅仅为立方体顶点的坐标。举例来说,在此方法中,自动测定图像的各立体像素的似然值,得到立体像素如何分类的似然性-例如,立体像素是否为特定初始VOI或背景。
在某些实施例中,由机器学习模块执行的立体像素分类可经由迭代过程改进以便减少分类过程中的噪声。特定地说,在某些实施例中,机器学习模块(例如CNN模块)接收整个图像或其部分作为输入,且针对各特定立体像素,输出将特定立体像素分类为以下的标记:(i)对应于解剖区域或目标组织区域的预定义类别集合中的一者,或(ii)背景。举例来说,经训练以鉴别对应于脊柱、骨盆区域以及左上半身及右上半身的初始VOI的定位模块可将各立体像素标记为分别针对脊柱、骨盆区域、左上半身及右上半身的1、2、3或4,或针对背景的0。
鉴别特定初始VOI内的一或多个目标组织区域的分段模块可接收特定初始VOI作为输入,且输出各立体像素的整数标记,其中整数标记将彼立体像素鉴别为对应于特定目标组织区域或背景中的一者。举例来说,鉴别不同脊椎骨的分段模块可接收对应于脊柱的初始VOI作为输入,且用对应于特定脊椎骨的整数标记初始VOI中的各立体像素(例如,1用于第一腰椎,2用于第二腰椎,3用于第三腰椎等,其中其它整数标记其它骨)。
由如上文所描述的机器学习模块执行的分类可产生有噪声结果,其中某些孤立立体像素具有与其环境不同的标记。举例来说,CNN模块可产生其中较大体积内的大部分立体像素分配第一标记的输出,其中孤立立体像素和/或小群立体像素分配不同,例如第二或第三标记,从而将其鉴别为对应于与其相邻者不同的解剖区域。通常,这些孤立立体像素和/或岛状物呈现在均匀标记的大区域的边缘上。
这些小的非均匀性对应于分类过程中的噪声,且可经由如下迭代程序去除。第一,针对表示(i)特定解剖区域或目标组织区域或(ii)背景的各标记,鉴别经标记立体像素的相关最大连接组分。第二,针对各特定标记,紧邻与特定标记相关的最大连接组分的立体像素的不同标记的孤立立体像素和/或立体像素岛状物经鉴别且重新分配特定标记。在某些实施例中,在第三步骤中,随后可去除任何剩余孤立的经不同标记的立体像素岛状物。在第四步骤中,填充分段区域(标记为背景但完全通过非背景标记的立体像素包封的立体像素)中的孔(例如,通过对孔的立体像素分配包封其的非背景区域的标记)。重复第二至第四步骤,其中孤立立体像素和/或立体像素岛状物基于其环境重新标记,直到汇聚(即,一个迭代至下一个迭代无变化)为止。此方法减少和/或消除与其周围不同的标记的孤立立体像素,借此减少分类过程中的噪声。
用于鉴别初始VOI的这些不同方法可单独或组合使用以鉴别个体的解剖图像内的多个初始VOI。在鉴别一或多个初始VOI后,可鉴别各初始VOI内的一或多个目标VOI。举例来说,PCT公开案WO2019/136349(其内容以全文引用的方式并入本文中)提供以下的其它细节:可在CT图像内如何鉴别对应于骨盆区域的单个初始VOI;及可如何执行精细分段以鉴别对应于器官(例如***、膀胱、臀部肌肉)的目标VOI;以及可鉴别不同骨盆骨骼,例如骶骨、尾骨以及左髋骨及右髋骨。本文中所描述及尤其在实例1至4中的方法,展示多个初始VOI可如何鉴别且用于鉴别个体的整个身体中的多个目标VOI,借此提供精确的全身图像分段,所述全身图像分段可充当用于检测及评估不同器官及组织区域中的局部化阶段以及转移性阶段(其存在于患者身体中的多个区域中)下的癌症状态、进展及对治疗的反应的基础。
ii.将解剖内容提供到3D功能图像
通过解剖图像的自动基于AI的分析产生的分段图可转印到3D功能图像,以便在3D功能图像内鉴别对应于解剖图像中所鉴别的目标VOI的3D体积。特定地说,在某些实施例中,(分段图的)个别分段掩模从3D解剖图像映射到3D功能图像。3D功能图像内鉴别的3D体积可用于分析图像以评估癌症状态的多种目的。
某些鉴别的3D体积及对应目标VOI对应于其中疑似和/或可发生癌症的组织区域。这些区域可包含例如***、***组织、肺、大脑、***及骨。还可评价其它区域。某些区域(例如***、***及肺)与检测在早期、局部化阶段下的癌症有关,而其它区域(例如***及骨)与评估转移癌有关。由于功能图像(例如PET及SPECT图像)的强度映射患者身体中的放射性药品积累的空间分布,因此通过精确地鉴别功能图像中对应于特定组织区域的特定3D体积,那些3D体积内的立体像素强度可用于测定放射性药品探针在其对应的特定组织区域内的吸收测量值。由于放射性药品探针可经设计以在癌组织中选择性累积(例如,经由增强癌组织中过度表达的生物分子的亲和力,例如***特异性膜抗原(PSMA)),因此检测及定量特定探针在某些目标组织区域及所关注的器官中的吸收指示个体的癌症状态和/或可用于测定个体的癌症状态。举例来说,如PCT公开案WO2019/136349(其内容以全文引用的方式并入本文中)中所描述,评估***体积中的1404吸收可用于测定个体的***癌状态。其它探针可用于评估存在于广泛多种其它组织区域(包含骨)中的转移癌。举例来说,实例2至6描述用于鉴别PyLTM于患者整个身体的癌病变中的积累的分段。
因此,在某些实施例中,将对解剖图像(例如CT图像)执行的分段转印(例如,映射)到共配准的功能图像(例如PET或SPECT图像),从而允许功能图像内对应于特定组织所关注区域的特定组织所关注体积得到鉴别。放射性药品于那些特定组织区域内的积累随后可基于位于特定组织所关注体积内的功能图像立体像素的强度来定量。
多种方法可用于分析功能图像中的立体像素强度。举例来说,可计算特定体积内的平均强度、中位强度、总强度、最大强度等且用于定量。随后可将此计算值与例如针对其它组织区域所计算(例如,标准化)的其它值进行比较,且用于将癌症状态分配到患者(例如,基于与一或多个预定阈值的比较)。在某些实施例中,在特定3D体积内鉴别高强度的局部化区域(称作热点)。如下文部分B中进一步详细描述,这些局部化热点可鉴别为表示癌病变,且用于测定个体的癌症状态。在某些实施例中,可使用机器学习方法。举例来说,位于一或多个特定组织所关注体积内的功能图像立体像素的强度可用作机器学习模块的输入,所述机器学习模块计算本身可用于定量癌症、癌转移或癌症复发等的风险和/或与参考值(例如阈值)相比较以指定特定癌症状态的风险指标。
在某些实施例中,除鉴别其中可存在癌组织的特定组织区域(例如,以便测定其中癌症的存在和/或状态)以外,可鉴别其它额外组织区域。这些额外组织区域可对应于背景区域,其中特定放射性药品探针在正常情形下积累,而不必存在病变。
在某些实施例中,经鉴别的背景区域用于标准化立体像素强度以便标准化图像间的强度值。举例来说,如PCT公开案WO2019/136349(其内容以全文引用的方式并入本文中)中所描述,可鉴别臀部肌肉且其吸收可用于标准化投予1404后所获得的SPECT图像的强度。
某些背景区域的鉴别也可用于解释这些区域中的高探针积累水平。在某些实施例中,某些背景区域经鉴别且由分析排除。举例来说,如实例3中所描述,某些探针(例如PyLTM)可在正常情形下积累于某些背景区域中,而那些区域内不存在任何癌病变或组织。因此,这些区域可经鉴别且由例如热点检测分析排除。这些区域的实例包含肾脏、十二指肠、小肠、脾、肝脏、胰脏、胃、肾上腺、直肠及睾丸。
在某些实施例中,鉴别功能图像中对应于背景区域的3D体积可用于校正强度渗出效应(intensity bleed effect),其中放射性药品于特定区域中的高积累可不仅在对应于特定区域的3D体积中且也在其邻域中产生高强度的功能图像。渗入到功能图像的其它区域中的此强度可遮蔽有用信号。举例来说,放射性药品通常以较高量积累于患者的膀胱中。当经由功能成像模式成像时,膀胱中的此高积累可经由散射效应促进对应于膀胱外部组织区域(例如***)的3D体积中的强度。因此,考虑此强度渗出或“串扰(cross-talk)”可改进精确度,利用所述精确度,3D功能图像中的强度用于测量潜在放射性药品吸收。
在某些实施例中,扩张对应于产生强度渗出的特定背景区域的3D体积。经扩张的背景区域可由分析排除,以便避免使用与背景区域直接相邻的区域的强度来测定吸收度量或热点的鉴别。
在某些实施例中,模拟功能强度的概况的抑制方法也可用于调节邻近区域的强度水平以校正强度渗出。在此方法中,针对产生强度渗出的特定背景区域,从功能图像的特定立体像素去除的抑制量(即,强度渗出)视立体像素到对应于特定背景区域的特定3D背景体积内的高强度核心区域的距离而定。高强度核心区域可测定为包括立体像素的区域,所述立体像素具有高于预定值,或功能图像的特定区域中最大强度的特定部分内的强度。
在某些实施例中,如果鉴别为对应于特定背景区域的3D体积内的最大功能图像强度大于特定倍增值乘以经测定背景强度值,那么利用此抑制。背景强度值可基于对应于特定参考体积的3D功能图像的立体像素强度而测定,所述特定参考体积对应于特定组织区域(例如臀部肌肉)。抑制方法可应用于在产生强度渗出的特定背景区域附近的3D功能图像的子区域。举例来说,其可应用于涵盖特定区域外加预定界限的矩形子区域。
在某些实施例中,一或多个强度渗出函数经测定以执行抑制且借此校正针对渗出(例如,串扰)的3D功能图像的立体像素强度。举例来说,3D功能图像可裁剪成涵盖特定区域外加预定界限的前述矩形子区域。可从经裁剪图像区域内的立体像素强度减去经测定的背景强度值。随后可采集样品强度以测定当一个人从对应于特定背景区域的特定背景3D体积移开时,源自特定背景区域内的放射性药品吸收的强度如何降低。可使用以极端顶部、右边、左边及底部开始,且随后分别朝上、朝右、朝左及朝下移动的样品。其它方向同样为可能的。采样强度提供展示从高强度核心降低强度的曲线(例如,采样强度数据点的集合)。模板函数(例如n次多项式)可适合于这些采样曲线且用于计算特定3D背景体积附近的待用作校正因子的强度值。
举例来说,PCT公开案WO2019/136349(其内容以全文引用的方式并入本文中)描述了在1404-SPECT图像中,膀胱区域的鉴别可如何用于针对因膀胱中的高积累而导致强度渗出来调节***立体像素强度。在某些实施例中,类似方法可用于用其它探针获得的其它图像,所述探针可积累于膀胱和/或其它区域(例如,肝脏、肾脏等)中。
在某些实施例中,本文中所描述的分段方法假设3D解剖图像包含某些解剖区域。举例来说,本文中所描述的***及方法的实施例可假设其输入解剖图像始终包含骨盆区域且自动尝试分段骨盆区域。针对其它解剖区域,如果其包含于解剖图像输入中,那么本文中所描述的***及方法也可仅分段这些区域,例如首先执行关于其是否存在的测定。
用于执行全身分段以鉴别对应于骨和/或软组织(例如,器官)的目标组织区域的方法进一步详细描述于下文实例1、2、3及4中。还描述使用这些全身分段以评估疾病状态,尤其患者的癌症的方法。
B.热点及病变检测
在某些实施例中,作为定量功能图像内特定体积中的总体吸收的替代或补充,检测局部化热点(相对高强度的局部化区域)。在某些实施例中,热点经由定限方法检测-通过比较功能图像内的立体像素强度与一或多个阈值。强度高于阈值的立体像素分组可检测为热点。可使用单个全域阈值,或在某些实施例中,也可使用多个区域特定阈值。举例来说,共配准的解剖图像的分段可用于设定用于热点检测的不同组织区域的不同阈值。如本文中所描述,也可使用共配准图像的分段以去除背景信号的效应,借此促进热点检测(例如,全域阈值和/或多个区域阈值是否使用)。
在某些实施例中,热点可额外使用斑点检测技术来检测。一个方法为使用高斯差分方法,其中PET图像经由近似高斯核的高通滤波器及低通滤波器的组合来滤波。滤波器减少背景噪声且对于图像的不同区域中的背景水平的变化为恒定的(例如,与骨盆区域相比,胸腔可能由于肝脏及肾脏中的显著吸收而具有显著较高的背景水平)。此级联式高/低通滤波器方法将允许热点提取而不采用固定阈值,但可替代地鉴别PET强度的局部变化。另一方法为采用高斯拉普拉斯斑点检测方法。高斯拉普拉斯方法为一种使用拉普拉斯及高斯滤波核检测图像的边缘的方法。通过使用不同大小的核,检测不同大小结构的边缘。选择适当的核大小允许所述方法检测具有病变共有的特性的结构。所描述的方法可以单独方式使用,其中仅技术中的一者用于所有所关注区域;或其可同时使用,其中如通过对共配准解剖图像的语意分段,结合单个全域阈值或多个局域阈值来鉴别,可对不同组织区域采用不同方法。
图5B展示使用本文中所描述的分段方法以检测表示癌病变的热点的实例工艺520。在第一步骤中,接收3D解剖图像522。在3D解剖图像内鉴别对应于特定目标组织区域的一或多个目标VOI 524,且将鉴别的目标VOI拼接在一起526以创建包括多个分段掩模536的分段图534。分段图的各分段掩模表示特定目标VOI。接着,接收3D功能图像(例如,PET图像)528,且将分段图转印到3D功能图像以针对各目标VOI鉴别3D功能图像中的对应3D体积530。经鉴别的3D体积随后用于在3D功能图像内检测532对应于相对于其周围的高强度局部化区域的一或多个热点。特定地说,一或多个特定3D体积可对应于癌病变可形成的特定组织区域,且经分析以检测其中的热点。其它3D体积可用于执行背景校正,或有意地从热点检测过程中排除。如本文中进一步详细描述,另外其它体积可能有关,原因在于其用作用于计算可分配到热点以便对其评分,例如指示其表示的潜在病变的风险/严重程度的有用指标的参考体积。
热点也可在其初始检测后分类为例如癌或非癌,和/或分配表示其成为癌转移的可能性的似然值。热点分类可通过提取热点特征(例如,描述特定热点的特征的度量)且将经提取热点特征用作分类的基础(例如,经由机器学习模块)来执行。
在某些实施例中,热点分类也可在不使用机器学***的概况可估计且用于减去存在于携带癌病变的邻近组织区域中的经估计额外强度水平以允许较稳固的热点检测。
表示病变的热点可用于测定提供患者的疾病存在和/或状态(例如癌症状态,类似于格里森评分)的指示的风险指标。举例来说,度量(例如热点数目、经鉴别热点的总求和强度、热点占据的特定身体部分或区域(例如,骨架)的面积分数及其类似者)本身可用作和/或用于计算这些风险指标。在某些实施例中,经由本文中所描述的分段方法鉴别的区域可用于计算风险指标,例如用于计算度量(例如面积分数)。使用经鉴别热点来计算风险指标的方法的实例提供于本文中的实例5及7中。
C.实例基于CNN的全身分段及病变检测方法
以下实例表明对全身分段使用本文中所描述的基于AI的分段及热点检测方法,从而检测癌病变且测定用于评价个体的癌症状态的有用度量。
i.实例1-基于CNN的全身分段
实例1描述全身分段的实例方法。此实例中的实施方案使用五个神经网络来分段整个躯干内的骨骼。第一神经网络用于粗略地定位身体的不同区域。结果用于将身体划分成四个区域。在这些区域中的每一者中,对应神经网络随后用于将分段执行到不同骨骼中。随后将来自所有四个区域的结果合并成最终结果(例如,最终分段图)。
此方法涉及本文中所描述的两步“限界框”方法,其中第一机器学习模块(例如,定位模块)用于粗略地定位对应于包括一或多个特定目标组织区域(例如,***)的解剖区域的初始所关注体积(VOI)。第二机器学习模块(例如,分段模块)随后执行初始VOI内的精细分段以鉴别初始VOI内对应于目标组织区域的目标体积。在此情况下针对全身分段,第一机器学习模块(定位模块)鉴别多个初始VOI,其各自对应于不同解剖区域。随后,针对各解剖区域,对应第二机器学习模块(分段模块)鉴别一或多个目标体积,其各自表示特定目标组织区域。机器学习模块(例如,神经网络)可实施为独立模块,或可组合某些机器学习网络。举例来说,各第二分段网络可实施为独立模块,或在单个模块内。
因此,在此实例中,第一模块(定位)用于鉴别CT内的解剖区域;即,发现其中可应用第二模块的网络以产生用于进一步分析的分段图的所关注体积。第二模块中的网络对全分辨率CT图像起作用,而定位网络使用CT图像的子采样版本在低分辨率中起作用。
CNN网络的三个实例版本在根据方法实施全身分段的软件中使用。版本1及2对49个骨骼进行分段,且版本2对49个骨骼及8个软组织区域进行分段。
基于CNN的分段平台实例版本1
在用于全身分段的CNN网络的第一实例版本中,第一机器学习模块(定位模块)在此实例中被称为“粗略分段(coarse-seg)”,且经训练以鉴别子采样CT图像中的49个骨骼(沿各维度,子采样因子为4)。定位模块用于将身体的区域分化成骨盆区域、脊柱、左上半身及右上半身。四个精细分段网络如下:
·“精细分段骨盆”:经训练以鉴别左髂骨及右髂骨以及骶骨及尾骨;
·“精细分段脊柱”:经训练以鉴别12个胸椎、5个腰椎及胸骨;
·“精细分段左上半身”:经训练以鉴别身体左侧的12个肋、左肩胛骨及左锁骨;及
·“精细分段右上半身”:经训练以鉴别身体右侧的12个肋、右肩胛骨及右锁骨。
各网络的输入图像大小如下:
表1:五个神经网络的输入图像大小。
网络名称 输入图像大小(切片数、行数、列数)
粗略分段 (81,70,104)
精细分段骨盆 (93,146,253)
精细分段脊柱 (194,204,94)
精细分段左上半身 (158,187,144)
精细分段右上半身 (158,191,146)
当定位模块的粗略分段网络接收(作为输入图像)表示大物理体积及包括个体身体的大部分的3D解剖图像时,其输入图像中的实际立体像素数目由于4个子采样因子而比另一网络低。输入图像到定位模块的立体像素数目及大小也通过裁剪(去除)不包含组织的图形表示,但替代地表示空气的图像区域来减少。去除这些立体像素作为预处理步骤进一步减少输入到定位模块的图像大小(参见例如下表4之前两列)。经由子采样减小输入到定位模块的图像大小允许粗略分段网络将其所操作的图像的分辨率交换为额外滤波,从而允许其例如解释其接收的图像的变化率且执行更精确及稳固的粗略分段来鉴别不同初始所关注体积。
用于各神经网络中的滤波器数目及参数数目列于下表2至4中:
表2:五个神经网络中卷积滤波器的数目。
网络名称 滤波器的总数目 第一层中滤波器的数目
粗略分段 4096+49(49个类别) 32
精细分段骨盆 4096+3 32
精细分段脊柱 2048+18 16
精细分段左上半身 2048+14 16
精细分段右上半身 2048+14 16
表3:五个神经网络中的参数的数目
网络名称 总参数 可训练参数数目 不可训练参数数目
粗略分段 5,881,978 5,878,678 3,300
精细分段骨盆 5,880,276 5,877,068 3,208
精细分段脊柱 1,472,815 1,471,177 1,638
精细分段左上半身 1,472,731 1,471,101 1,630
精细分段右上半身 1,472,731 1,471,101 1,630
下表4也展示用于此实例中的原始数据及五个神经网络的输入图像大小的变化率。如表中所展示,四个第二精细分段网络的输入图像大小的变化率小于第一定位网络,因为针对第二机器学习模块,初始VOI的鉴别产生更标准化的输入。
表4:原始数据及五个神经网络的输入图像大小。
Figure BDA0003151015600000431
基于CNN的分段平台实例版本2
如上文所描述的CNN全身分段***的经更新第二实例版本在此实例中包含输入图像大小的调节、卷积滤波器数目及用于执行分段的神经网络中所使用的参数。如下文所见的表5、6及7展示用于五个神经网络中的不同参数的更新值。表5展示表1中所展示的输入图像大小的更新值,表6展示表2中所展示的神经网络的卷积滤波器数目的更新值,且表7展示由表3中所展示的神经网络使用的参数数目的更新值。
表5:五个神经网络的输入图像大小的更新值。
Figure BDA0003151015600000432
Figure BDA0003151015600000441
表6:五个神经网络中卷积滤波器数目的更新值。
网络名称 滤波器的总数目 第一层中滤波器的数目
粗略分段 4096+49(49个类别) 32
精细分段骨盆 3328+3 26
精细分段脊柱 2048+18 16
精细分段左上半身 2048+14 16
精细分段右上半身 2048+14 16
表7:五个神经网络中的参数数目的更新值
网络名称 总参数 可训练参数数目 不可训练参数数目
粗略分段 5,882,423 5,879,132 3,300
精细分段骨盆 3,881,200 3,883,812 2,612
精细分段脊柱 1,472,815 1,471,177 1,638
精细分段左上半身 1,472,731 1,471,101 1,630
精细分段右上半身 1,472,731 1,471,101 1,630
基于CNN的分段平台实例版本3
CNN全身分段方法的另一第3实例版本用于分段软组织区域以及骨骼。如本文中所描述,此第3版本包含两个并行使用的粗略分段模块,在本文中称作“粗略分段02”及“粗略分段03”
“粗略分段02”模块经训练以鉴别子采样CT图像中的49个骨骼。“粗略分段03”模块经训练以鉴别子采样CT图像中的49个骨骼及肝脏。“粗略分段02”模块对骨骼的定位胜过“粗略分段03”模块,且为利用各模块的益处,并行使用二者以鉴别不同精细分段网络的初始所关注体积(例如,“限界框”)。特定地说,在第3版本中,使用七个精细分段网络。七个精细分段网络当中的六者使用“粗略分段02”以用于初始所关注体积鉴别,且第七个(“精细分段腹部”)使用“粗略分段03”以用于初始所关注体积鉴别。
CNN全身分段***的此第3实例版本的七个精细分段网络如下:
·“精细分段腹部”:经训练以鉴别肝脏、左肾脏及右肾脏以及胆囊;
·“精细分段左肺”:经训练以鉴别左肺;
·“精细分段右肺”:经训练以鉴别右肺;
·“精细分段混合的骨盆区域”:经训练以鉴别左髂骨及右髂骨、***、膀胱以及骶骨及尾骨;
·“精细分段脊柱骨”:经训练以鉴别12个胸椎、5个腰椎及胸骨;
·“精细分段左上半身骨”:经训练以鉴别身体左侧的12个肋、左肩胛骨及左锁骨;及
·“精细分段右上半身骨”:经训练以鉴别身体右侧的12个肋、右肩胛骨及右锁骨。
下表8、9及10展示基于CNN的分段***的第3版本中的七个神经网络中所使用的不同参数的值。
表8:七个神经网络及两个定位网络的输入图像大小。
网络名称 输入图像大小(切片数、行数、列数)
粗略分段02 (81,77,99)
粗略分段03 (81,77,99)
精细分段腹部 (92,176,259)
精细分段左肺 (154,171,140)
精细分段右肺 (154,171,141)
精细分段左上半身骨 (154,171,140)
精细分段右上半身骨 (154,170,140)
精细分段混合的骨盆区域 (92,144,251)
精细分段脊柱骨 (192,183,115)
表9:七个神经网络及两个定位网络中卷积滤波器的数目。
Figure BDA0003151015600000451
Figure BDA0003151015600000461
表10:七个神经网络及两个定位网络中参数的数目。
网络名称 总参数 可训练参数数目 不可训练参数数目
粗略分段02 5,882,432 5,879,132 3,300
粗略分段03 5,882,469 5,879,167 3,302
精细分段腹部 1,473,003 1,471,369 1,634
精细分段左肺 1,472,752 1,471,120 1,632
精细分段右肺 1,472,752 1,471,120 1,632
精细分段左上半身 1,472,731 1,471,101 1,630
精细分段右上半身 1,472,731 1,471,101 1,630
精细分段混合的骨盆区域 3,883,812 3,881,200 2,612
精细分段脊柱骨 1,472,815 1,471,177 1,638
因此,此实例表明本文中所描述的分段方法可如何用于执行有效的全身分段。
ii.实例2:低剂量CT中骨架的自动分段及[18F]DCFPyL PET中转移性***癌的定
PSMA-PET/CT混合成像为一种有前景的***癌患者的诊断平台。虽然为了精确诊断及治疗规划,通常需要手动划定三维CT图像中的器官,但此手动划定为费时的过程。为解决此难题,此实例表明根据本文中所描述的全身分段技术,使用深度学习方法使全身CT图像中的精确骨分段的过程自动化。如此实例中所描述,经由此骨骼分段获得的解剖信息可用于在[18F]DCFPyL(PyLTM-PSMA)PET/CT图像中创建全自动病变检测算法。
研发基于级联式深度学习卷积神经网络的深度学习算法以用于12个骨骼区域的语意分段。特定地说,12个骨骼区域为胸椎及腰椎、左(sinister/left)/右((dexter/right)肋、胸骨、左/右锁骨、左/右肩胛骨、左/右髂骨及骶骨。低剂量CT图像及手动精制分段图对的训练集(N=90)及验证集(N=22)用于研发深度学习算法。在从PyLTM-PSMA研究获得的低剂量CT图像的测试集(N=10)上评估算法的性能。在图像的测试集中,手动分段五个代表性身体部分:左髂骨、腰椎、左肋、右肩胛骨及胸骨。这些手动分段用作评估自动分段程序的真实数据(ground truth)。
自动分段可用于自动病变检测。举例来说,可执行使用基于PET图像立体像素强度的标准吸收值(SUV)的硬式阈值的自动病变检测方法。
Sorensen-Dice评分用于评价自动分段的精确度。分段方法获得在训练集上分别为0.95及0.024的Sorensen-Dice评分平均值及标准差,且在验证集上分别为0.93及0.036的平均值及标准差。针对测试集,五个区域中的每一者的平均值(其中标准差值展示于圆括号中)如下:右锁骨的0.94(0.016)、左肋的0.90(0.023)、胸骨的0.92(0.019)、腰椎的0.94(0.033)及左髂骨的0.97(0.0033)。总体平均值(相对于所有身体部分)为0.93,标准差为0.030。
因此,此实例表明全身低剂量CT图像中12个骨骼区域的全自动分段方法的精确度及用于PyLTM-PSMA/CT混合成像的自动病变检测方法的用途。
iii.实例3:用于PyLTM-PET图像分析及病变检测的自动全身分段
此实例表明根据本文中所描述的全身分段技术,使用深度学习方法自动分段全身CT图像中的49个骨骼及27个软组织区域。此实例也表明经由此分段获得的解剖信息可如何用于在[18F]DCFPyL(PyLTM-PSMA)PET/CT图像中创建全自动病变检测算法。此实例还展示分段可如何用于从PET图像去除背景信号以有助于观测及检测其中PyLTM已积累的病变。
图6A展示说明用于此实例中所描述的PyLTM-PET/CT图像分析中的本文中所描述的分段工艺的实施例的方框流程图。如同图5中所展示的工艺500,在工艺600中接收解剖图像。特定地说,在工艺600中,接收CT图像610a。在此实例中,工艺600用于鉴别CT图像且将其分段成对应于49个特定骨骼及8个软组织区域的目标所关注体积(在此实例中,使用实例1中所描述的基于CNN的分段方法的实例版本3)。为鉴别目标体积,执行粗略分段620a以定位初始所关注体积或子区域集合,例如如实例1中所描述。随后在子区域中的每一者内执行精细分段以鉴别对应于目标49个骨骼及8个软组织区域的特定目标所关注体积630a。可创建及合并表示经鉴别的目标体积的分段掩模640a,例如创建3D全身分段图。
如实例1(CNN网络版本3)中所提及,所分段的特定区域如下:
49个骨骼:
左_锁骨
右_锁骨
左_髋骨
右_髋骨
左肋_1
左肋_10
左肋_11
左肋_12
左肋_2
左肋_3
左肋_4
左肋_5
左肋_6
左肋_7
左肋_8
左肋_9
右肋_1
右肋_10
右肋_11
右肋_12
右肋_2
右肋_3
右肋_4
右肋_5
右肋_6
右肋_7
右肋_8
右肋_9
骶骨_及_尾骨
左_肩胛骨
右_肩胛骨
胸骨
腰椎_1
腰椎_2
腰椎_3
腰椎_4
腰椎_5
胸椎_1
胸椎_10
胸椎_11
胸椎_12
胸椎_2
胸椎_3
胸椎_4
胸椎_5
胸椎_6
胸椎_7
胸椎_8
胸椎_9
8个软组织区域:
胆囊
左_肾脏
右_肾脏
肝脏
左_肺
右_肺
***
膀胱
图6B展示与标注重迭的一系列CT图像,所述标注说明此实例中所描述的全身分段工艺600中的步骤。在步骤610a处接收的实例原始CT图像展示于610b中。图像620b展示用于鉴别CT图像中的初始所关注体积的粗略分段的结果(所鉴别的不同区域展示为彩色区域)。图像630b展示鉴别初始所关注体积的“限界框”,其中执行精细分段以鉴别对应于49个骨骼及8个软组织区域的目标所关注体积。图像640说明最终合并的全身分段。
转向图7,为训练用于执行分段的机器学***台的许多组件的最优选配置之前,使用1000个手动标注标记以及100个在几十个GPU上训练历经1000个小时的模型来微调。然而,一旦经训练,则可快速执行分段,其中结果(例如图8(810及820为两个实例图像)及图16A及16B中所展示的那些)在约几秒(通常低于180秒)中获得。
通过分段CT图像所获得的解剖内容可用于检测PET图像中与CT图像共配准的病变,例如,如在快速连续获得个体的CT及PET图像的典型PET/CT成像模式中,其中使个体保持在与所记录图像大体上相同的位置。特定地说,如此实例中所表明,CT图像的分段可转印到PET图像以便鉴别所关注区域(例如***或骨架),其中除了预期携带原发性或继发性***癌肿瘤的区域以外的整个功能图像可由病变检测算法排除。在不希望束缚于任何特定理论的情况下,由病变检测算法排除区域对于其中积累会引起背景组织区域内及其周围的PET图像立体像素的高强度的背景区域而言可尤其重要。如果不将背景组织区域中的高强度从***病变检测过程中排除,那么可导致将背景噪声错误分类为癌病变。在背景排除过程之后保留下的区域中,可采用简单阈值(例如,SUV为3)结合病变分类算法以发现相关组织区域内的热点。分类算法可用作简单检查以确定热点位置及比较热点邻域的强度。如果热点为较大热点的一部分且位于身体部分的边缘上(例如,接近于肝脏的肋),那么可将病变分类为噪声且排除。图9A至9D说明对此背景减法及病变检测算法的需要且通过其所获得的益处,其中所关注区域仅包含于检测程序中,且图像的部分含有高强度背景立体像素。图9A及9C展示重迭于CT图像上的呈白色到红色到蓝色的假色的PET图像。蓝色指示低PET图像强度,随着强度增加从红色转变到白色。图9B及9D展示与9A及9C中相同但所有背景吸收从PET图像中去除的PET图像。在图9B及9D中,对应于癌病变的少数局部化热点为可见的。在无背景去除的PET图像中,这些热点经大背景信号淹没及遮蔽。
图10A展示使用由全身CT分段提供的解剖内容以检测病变且测定有用风险指标的实例性工艺1000,所述有用风险指标使用在投予作为放射性药品的PyLTM后所获得的PET/CT图像来定量个体的癌症状态(例如,***癌状态)。如图10A中所展示,获得PET/CT图像1010,解剖内容经由骨骼及软组织的分段测定1012且用于从PET图像获得测量值(例如,病变和/或风险指标的测量值)1014。图10B展示实例性PET/CT图像1016,且图10C展示骨骼及软组织的实例性分段1018a及1018b。如图10D中所展示,骨骼及软组织的分段(例如,展示于图像1020a中)可用于去除背景信号(例如来自背景组织区域,例如展示于图像1020b中的那些),仅留下来自指示癌病变的热点1020c的所需信号。
图11至13说明此工艺,其展示CT图像的分段可如何转印到PET图像,且用于提供用于背景去除及病变检测的解剖内容。特定地说,图11A及图11B展示CT图像的不同视图,其中已执行骨骼的分段。在图11A及图11B中所展示的视图中,不同分段骨骼用不同颜色标记。值得注意地,借助于本文中所描述的“限界框”方法,甚至此复杂及大规模分段可极其快速执行。在小于180秒内执行展示于图11A及11B中的分段。
如图12中所展示,骨骼及软组织的分段可用于解释可在正常情形下发生且遮蔽指示癌病变存在的有用热点信号的某些背景组织区域中的正常吸收。在用PyLTM执行的PET/CT成像中,正常吸收可在肾脏、十二指肠、小肠、脾、肝脏、胰脏、胃、肾上腺、直肠及睾丸中发生。图12展示以红色鉴别的前述区域。如图13A中所展示,在减去由于这些区域中的正常PyLTM积累而导致的背景强度后,病变变为可容易观测且可检测。一个此类病变1302在图13A至13D中可见。病变(例如病变1302)可例如经由定限方法检测,且分类为例如如上文所描述的PyLTM阳性(即,指示癌症)。如同分段一样,病变检测也为快速的。在小于5秒内检测病变1302。
图14A及图14B展示对患有转移性耐去势性***癌(metastatic castrationresistant prostate cancer)的65岁男性所获得的PET/CT图像执行的上文所描述的PET图像处理及病变检测方法的结果。患者的***特异性抗原(PSA)评分为6.8ng/ml。PET图像在投予作为放射性药品的PyLTM后获得。图14A展示初始、原始PET/CT图像。图14B展示在本文中所描述的处理后的图像。去除背景强度,且若干种小病变可容易观测。在小于180秒内执行49个骨骼及8个软组织区域(例如,器官)的分段。
图15A及图15B展示对患有转移性耐去势性***癌的54岁男性所获得的PET/CT图像执行的PET图像处理及病变检测方法的结果。患者的PSA评分为33.55ng/ml。PET图像在投予作为放射性药品的PyLTM后获得。图15A展示初始、原始PET/CT图像。图15B展示在本文中所描述的处理后的图像。去除背景强度,且若干种小病变可容易观测。在小于或约180秒内再次执行49个骨骼及8个软组织区域(例如,器官)的分段。
因此,此实例表明本文中所描述的全身分段方法如何利用27个软组织器官及49个骨骼的自动分段对PyLTM图像进行处境化(contextualizing)以检测、定量及跟踪PyLTM亲合病变。所述方法将允许临床医师/医师询问临床上地有关问题以用于较好地管理***癌患者。优势(例如,(统计学上)证实在人工智能辅助的1404-SPECT图像分析的背景下增大了诊断精确度、精密度、速度及再现性(参见例如PCT公开案WO2019/136349,其内容以全文引用的方式并入本文中)),针对PyLTM-PET图像也可获得。
iv.实例4:实例骨骼及软组织分段区域
此实例提供一组使用本文中所描述的方法及实施例研发的***可经由CT图像的分段鉴别的实例骨骼及软组织区域的列表。特定地说,下文列出已在CT图像集合中手动标记(例如,由一或多个人类专家鉴别)的67个骨骼及22个软组织区域。这些手动标记的CT图像可用作本文中所描述的机器学习方法的训练数据。举例来说,虽然实例1至3描述实施对49个骨骼及8个软组织区域进行分段的全身分段方法的当前软件版本,但其功能性可易于更新以分段列于此实例中的67个骨骼及22个软组织区域的任何数目。因此,此实例展示本文中所描述的***及方法的实施例可经研发以鉴别类似区域,包含(但不必限于)此实例中所描述的特定区域。某些***及方法可鉴别不必列于此实例中的组织区域。在某些实施例中,鉴别骨骼及软组织区域二者。在某些实施例中,一些***及方法可仅鉴别骨骼或仅鉴别软组织。
如下文列表中所指示,某些左侧及右侧骨骼经鉴别为独立组织区域(例如,左锁骨及右锁骨),且在某些情况下,单独地鉴别大组骨骼的个别成员。举例来说,以下的实例列表展示个别肋及脊椎骨经由此实例的分段方法鉴别(特定肋及脊椎骨编号于列表中)。此实例也应明确,本文中所描述的方法可用于分段整个身体的多个区域,包含(但不必限于)本文中所列出的区域。
分段区域:
骨骼(67个)
左_锁骨
右_锁骨
左_股骨
右_股骨
左_腓骨
右_腓骨
左_髋骨
右_髋骨
左_肱骨
右_肱骨
下颌骨
左_髌骨
右_髌骨
左_桡骨
右_桡骨
左肋_1
左肋_2
左肋_3
左肋_4
左肋_5
左肋_6
左肋_7
左肋_8
左肋_9
左肋_10
左肋_11
左肋_12
右肋_1
右肋_2
右肋_3
右肋_4
右肋_5
右肋_6
右肋_7
右肋_8
右肋_9
右肋_10
右肋_11
右肋_12
骶骨_及_尾骨
左_肩胛骨
右_肩胛骨
颅骨
胸骨
左_胫骨
右_胫骨
左_尺骨
右_尺骨
所有_颈椎
腰椎_1
腰椎_2
腰椎_3
腰椎_4
腰椎_5
腰椎_6
胸椎_1
胸椎_2
胸椎_3
胸椎_4
胸椎_5
胸椎_6
胸椎_7
胸椎_8
胸椎_9
胸椎_10
胸椎_11
胸椎_12
软组织(22个):
左_肾上腺
右_肾上腺
腹部主动脉_部分
胸部主动脉_部分
大脑
左_支气管
右_支气管
胆囊
左_臀大肌
右_臀大肌
心脏
左_肾脏
右_肾脏
肝脏
左_肺
右_肺
胰脏
***
直肠
膀胱
脑室
v.实例5:计算用于放射性药品吸收定量及临床终点评估的热点指标
实例5为使用本文所描述的分段及热点检测方法以针对特定经检测热点,计算可用于推断和/或定量放射性药品在经检测热点表示的病变内的吸收的热点指标值的实例方法。所计算的热点指标可与临床终点有关,包含患者的存活率且与确定治疗策略有关。当对在不同时间点采集的多个图像进行计算时,所计算的指标值可与特定患者的各其它者相比较,且指标的变化用于评价治疗功效及预测指标在不久的将来将如何变化。在某些实施例中,所计算的指标可预测针对靶向成像配体的治疗的敏感性。在某些实施例中,所计算的指标也可包含于有效患者分层的列线图(nomogram)中。
此实例中的方法使用针对特定患者,在投予包括PSMA结合剂(例如PyLTM)的放射性药品后所获得的CT-PET图像集。然而,本文中所描述的方法对用于成像的特定放射性药品为中立性的,且可与多种不同放射性药品,例如99mTc-MIP-1404、18F-PyL、68Ga-PSMA-11、18F-NaF、11C-胆碱、[18F]FDG、[18F]FACBC等一起使用。
根据本文中所描述的***及方法的基于机器学***均强度,尽管其它测量值(例如,中位值、最大值、模式等)为可能的。
为计算特定鉴别的热点的指标值,针对彼特定热点计算热点强度值且与参考强度值相比较。类似于参考值,热点强度值提供热点的立体像素的强度测量值。在此实例中,计算最大值,但如同参考值一样,可使用其它测量值。如此实例展示,用于计算热点强度值的特定测量无需与用于计算参考强度值的测量相同。为计算热点指标值,参考强度值可按一定比例映射到参考指标值,且热点指标值随后可基于热点强度值是否位于参考值之上、参考值之下或参考值之间来计算。
举例来说,通常由对应于主动脉部分(此主动脉区域用于提供血池中吸收的测量,且也可称作血液或血池参考值)的参考体积计算的参考强度值的值最小,接着肝脏且随后腮腺区域。因此,其热点强度值等于血液参考值的热点将分配等于100的热点指标值;其热点强度值等于肝脏参考值的热点将分配等于200的热点指标值;且其热点强度值等于腮腺参考值的热点将分配等于300的热点指标值。位于两个参考强度值之间的热点强度值的热点指标值可经由内插法(例如,线性内插法(linear interpolation))测定。
在此方式中,经检测热点可分配指标值,所述指标值以标准化方式(例如,以便可在不同图像之间比较)定量热点表示的特定病变中的放射性药品吸收的水平。如本文中所描述,这些指标可与存活率有关,反过来所述存活率使其对治疗管理有用。举例来说,可视患者的预期结果而考虑较多或较少积极治疗。也可包含治疗价格作为因素。指标在随着时间推移测量时尤其有用。当比较患者随时间及多个成像检查的指标时,指标的变化可用于评价治疗功效,且预测指标在不久的将来将如何变化。
值得注意地,此实例中所描述的方法相对于先前方法的显著优势为能够根据由本文中所描述的基于人工智能的分段方法提供的自动鉴别的3D体积计算参考强度值(以及热点强度值)。尝试定量表示病变的图像区域的先前方法依赖于手动标记(例如经由放置圆形标记物)2D切片中的区域,以鉴别位于参考组织区域内的2D所关注区域。与这些小2D区域相反,经由本文中所使用的方法鉴别的3D体积捕获遍及整个器官的强度,且借此提供增加的精确度及可重复性。此外,通过使用精确自动分段,提供精确度及可重复性的进一步增加。
另外,此实例的方法使用经由内插法计算的连续变化的指标,而非使用小数目个值中的一者分类经检测病变。此方法提供可用来管理治疗策略且以精细粒度及精确方式跟踪随时间推移的疾病进展和/或治疗功效的更详细信息。
vi.实例6:骨骼及局部淋巴中的自动热点检测及吸收定量
PyLTM-PSMA PET/CT混合成像(例如,在向患者投予PyLTM之后获得的患者的图像PET/CT图像)为用于检测转移性***癌的有前景的工具。本发明的图像分段、热点检测及定量技术可用作提供骨骼及局部淋巴(即,定域于患者的骨盆区域内和/或与其实质性接近的***)中异常PyLTM-PSMA吸收的自动定量评估的基础。特定地说,如此实例中所展示,根据本文中所描述的***及方法的图像分段及热点检测技术可用于PET图像的自动分析以检测医师可能鉴别为恶性病变的热点。
在此实例中,评价PET/CT扫描以在扫描的PET图像内自动鉴别对应于潜在骨骼及局部***病变的热点。针对各扫描,CT图像的语意分段使用本文中所描述的深度学习方法执行以便鉴别特定骨骼及软组织区域(例如,器官)的集合。一旦获得,则将CT图像分段转印(例如,映射)到PET/CT扫描的PET图像以鉴别PET图像中的对应3D体积。在各PET图像中,对应于背景吸收的强度通过抑制对应于膀胱、肝脏及肾脏的经鉴别体积中的强度来去除。分段也用于界定其中检测热点的有关体积。随后,应用斑点检测算法以鉴别表示可能骨骼病变或可能恶性局部***的异常热点。对应于肝脏及主动脉的胸部分的参考体积用于计算参考SUV值。
此实例中的热点检测方法的精确度通过比较PET图像中使用本文中所描述的自动方法检测的热点与由医师小组鉴别骨骼病变及***病变的手动标注来验证。标注为骨骼病变的157个PET/CT扫描(114个图像并不具有任何病变且11个图像具有超过三种病变)集合用于评价检测对应于骨骼病变的热点的精确度及标注为局部***病变的66个扫描(不具有病变的40个图像及具有超过三种病变的六个)集合。骨骼检测算法鉴别97%的所有标注骨骼病变,每个图像具有平均109个热点。局部淋巴检测算法发现96%的所有标注恶性局部***,每次扫描具有平均32个热点。
另外,在此实例中评价深度学习分段的精确度。分段算法经训练以分段用于界定热点搜索区域或作为参考区域使用的52个骨骼及7个软组织区域(例如,器官)的集合。针对各特定区域(骨骼或软组织区域),使用CT图像中彼区域的手动鉴别来执行及评价训练及验证。举例来说,140个手动鉴别的肝脏用于训练肝脏分段的算法,且37个手动鉴别的肝脏用于验证。类似地,61个及14个手动鉴别的主动脉分别用于训练及验证主动脉区域分段。针对肝脏分段,分别获得关于训练及验证集的0.99及0.96的分割评分。针对主动脉分段,分别获得关于训练及验证的0.96及0.89的分割评分。最后,未使用算法研发的十个额外图像集合用于评估一般化。针对这些十个图像,表征肝脏及主动脉的分段精确度的分割评分分别为0.97±0.01及0.91±0.5。
下文为此特定实例中所使用的特定52个骨骼(骶骨及尾骨在单线上列为“骶骨_及_尾骨”,但对应于两个经分段区域)及7个软组织区域的全部列表。
骨区域:
左_肩胛骨
左_锁骨
左_锁骨
右_锁骨
左_髋骨
右_髋骨
左肋_1
左肋_10
左肋_11
左肋_12
左肋_2
左肋_3
左肋_4
左肋_5
左肋_6
左肋_7
左肋_8
左肋_9
右肋_1
右肋_10
右肋_11
右肋_12
右肋_2
右肋_3
右肋_4
右肋_5
右肋_6
右肋_7
右肋_8
右肋_9
骶骨_及_尾骨
左_肩胛骨
右_肩胛骨
胸骨
腰椎_1
腰椎_2
腰椎_3
腰椎_4
腰椎_5
胸椎_1
胸椎_10
胸椎_11
胸椎_12
胸椎_2
胸椎_3
胸椎_4
胸椎_5
胸椎_6
胸椎_7
胸椎_8
胸椎_9
软组织区域:
腹部主动脉_部分
胸部主动脉_部分
左_肾脏
右_肾脏
肝脏
***
膀胱
因此,此实例表明基于深度学习的语意分段的用途,其用于在[18F]DCFPyL(PyLTM-PSMA)PET/CT图像中自动鉴别热点且计算SUV参考值。
vii.实例7:病变PSMA评分及PSMA加权病变参与
此实例提供一种基于个别热点强度与参考水平的比较分配经检测热点的热点指标,且随后使用经分配个别热点指标以测定表示病变大小的测量值的加权和的总体指标的方法。此实例中所使用的指标用于评估使用PSMA结合剂及PET-CT成像来成像的患者的癌症状态。
特定地说,个别热点指标根据这些参考水平经由与实例5中所描述的方法类似的内插法来测定。在此实例中,将对应于主动脉部分及肝脏部分的参考VOI分段且映射到PET图像中的对应3D体积。主动脉部分体积用于测定血液参考强度,且肝脏体积用于测定肝脏参考强度。在此实例中,各参考强度通过采用对应体积中的平均强度(SUV),由其对应体积测定,但也可使用其它测量值(例如最大值、峰值或中位值)。按一定比例,将参考水平(称作病变PSMA评分(Lesion PSMA Score;LPS))如下分配给基于血液及肝脏参考强度(SUV)的强度值:LPS 0分配给0SUV水平,LPS 1分配给血液参考强度,LPS 2分配给肝脏参考强度,且最大LPS 3分配给计算为两倍肝脏参考强度的参考强度。
个别热点基于其个别强度分配LPS评分。针对具有介于0至最大参考强度(两倍肝脏参考强度)范围内的强度的个别热点,对应于个别热点强度的LPS评分根据参考比例内插。具有超过最大参考强度的强度的热点分配最大LPS 3。
可使用经检测热点及个别热点指标(LPS评分)计算的两个实例总体风险指标经计算为对应于其中可发生癌病变的组织区域的特定体积中的热点大小的加权和。第一实例指标为加权PSMA的总体骨骼/淋巴/***病变体积或比率(PTLV或PTLR)。此指标为病变体积的加权和,权重为病变PSMA评分。针对对应于骨骼(例如,骨架区域)、***及***的3D体积,将总和单独地计算为各特定区域中发现的热点的热点体积的加权和。特定地说,加权和计算如下:
∑(病变体积×病变psma评分)
在某些情况下,比率可为优选的且可通过将加权和除以特定区域(例如,在PET图像中)的总3D体积来计算。与例如SUV或标准化SUV相反,通过LPS加权求和的热点体积为有利的,因为其以(标准化)SUV值形式表达的PSMA可能不与疾病的侵袭性呈线性关系。即,例如,不能假定具有强度100的热点表示病变比由具有强度20的热点表示的病变差五倍。计算LPS评分及通过LPS评分加权热点得到比较不同热点的比例。
另一实例指标为PSMA加权的骨骼/淋巴总直径(PLAD)。此指标也为病变大小的测量值的总和(由LPS评分加权),但此指标使用各热点的平均直径(例如,平均x直径、y直径及z直径)而非体积。由于体积为三维数量,因此大病变的较小体积变化相对于较小病变的大小变化可占主导(例如,引起总和的大波动)。使用平均直径缓解此效应。此指标计算如下:
∑(病变平均直径×病变psma评分)
针对骨骼及淋巴,可计算加权总直径。
vii.实例8:AI辅助式图像分析针对患有低风险或中等风险***癌的患者的改 进性能
99mTc MIP-1404(1404)为用于检测及分期临床上显著***癌的靶向PSMA的成像剂。手动评估SPECT/CT图像中的示踪剂吸收会在读取器间及读取器内标准化方面引入固有限制。此实例描述评价PSMA-AI辅助读数的性能的研究,其中相比于手动评估及已知临床预测值,根据本文中所描述的实施例执行***体积及其它目标组织区域的自动分段。
研究分析464名患有极低风险、低风险或中等风险***癌的可评价患者,其诊断切片检查指示格里森等级≤3+4和/或为主动监测的候选者(1404-3301)。所有个体接收1404的IV注射液且给药后3-6小时执行SPECT/CT成像。三个独立读取器评价图像。所有个体在给药后经受自愿RP(低风险及中等风险)或***切片检查(极低风险)。在格里森等级7或更高的个体中宣告临床上显著的疾病。在分析之前研发及锁定PSMA-AI。三个不同的独立读取器使用PSMA-AI获得1404在针对背景的***中的定量表达(PSMA指标)。所有读取器的PSMA指标及个体与组织病理学参考值相比较,从而得到6种接受者操作特征(receiveroperating characteristic;ROC)曲线(3个手动读数+3个PSMA-AI辅助读数)。1404PSMA-AI辅助读数的临床性能也通过比较具有及不具有PSMA指标的多变量模型(PSA、临床分期及诊断格里森评分)的ROC曲线下面积(AUC)来评价。
手动读数显示出0.62、0.62及0.63的AUC。具有PSMA-AI的读数显示出0.65、0.66及0.66的AUC。PSMA-AI性能就AUC来说在两个读数群之间的所有3×3=9的成对比较中高于手动(其中统计学上显著的改进在五种情况中观测到(标称p<0.05)),而不考虑多重比较。基线多变量模型(无PSMA指标)的预测能力处于AUC 0.74。在添加PSMA指标后,模型预测能力增加到AUC 0.77。逻辑回归模型指示PSMA指标(p=0.004)、术前PSA(0.018)及阳性核心%(p=<0.001)与临床上显著疾病显著相关。当测量再现性时,PSMAAI读数对的对数(PSMA指标)相关系数为0.94、0.97及0.98。
因此,此实例中所描述的研究证实PSMA-AI提供标准化平台以产生1404的可再现性定量评估。PSMA-AI辅助读数证实相对于用于鉴别患有临床上显著疾病的男性的已知预测值的额外改进。
ix.实例9:自动计算用于定量用于***癌分期的PET/CT图像的18F-DCFPyL吸收 的PSMA指标
此实例表明自动图像分段、病变检测及基于经由本文中所描述的方法的实施例分配给经检测病变的热点指标计算标准化指标评分。自动图像分析程序用于在投予放射性药品18F-DCFPyL(PyLTM)之后,评价经由PET/CT扫描成像的患者的癌症状态。
在此实例中,级联式深度学习通道用于分段CT图像中的有关器官,且将分段投影到PET图像空间中。特定地说,与对应于个体的骨骼的骨体积、对应于淋巴区域的淋巴体积及对应于***的***体积相对应的目标区域在CT图像中经分段且映射以鉴别PET图像中的对应3D体积。同样地,对应于主动脉部分及肝脏的主动脉及肝脏体积也经分段且映射到PET图像以用作如本文中所描述的参考区域。
在PET图像中检测热点。手动分段被视为表示病变的热点,以及通过算法未检测到的其它病变。各个别经检测热点通过计算称作病变miPSMA指标(LPI)的个别热点指标来定量。如上文实例6及7中所描述,此实例中所使用的LPI为使用自动分段(与手动鉴别相反)体积计算的连续指标。因此,其相比先前方法提供优势,所述先前方法利用图像中的不同器官的手动鉴别,且仅使用少量的有限数目个枚举值分类病变。因此,此方法提供可用来管理治疗策略且以精细粒度及精确方式跟踪随时间推移的疾病进展和/或治疗功效的更详细信息。
各个经检测热点的LPI是基于从血池(如从鉴别的主动脉体积测量)及肝脏参考区域测定的参考值来计算,例如与上文实例7中所描述类似。特定地说,血池参考强度(SUV值)使用PET图像内的主动脉体积来测量,且肝脏参考强度由PET图像中所鉴别的肝脏体积测量。血池及肝脏参考强度水平二者在PET图像中的对应体积内测量为平均SUV(SUVmean)。参考LPI指标值1及2分别分配给血池及肝脏参考强度。最大参考指标水平3分配给对应于两倍肝脏参考强度值的参考强度。
各个别经检测热点是基于(i)热点的所测量热点强度值及(ii)与血池及肝脏参考强度值及前述参考指标水平的比较来分配LPI评分。特定地说,针对各热点,对应于平均病变吸收的个别热点强度值计算为热点的全部立体像素的平均SUV。对于个别热点,如果平均病变标准吸收值(SUVmean)等于血池参考值,那么分配等于1的LPI;对于具有等于肝脏参考吸收值的平均病变吸收值的热点,分配等于2的LPI;且将等于3的LPI分配给平均病变吸收值等于或大于两倍肝脏参考吸收的热点。针对强度落于参考强度值之间的热点,基于热点强度值及参考强度-指标值对内插个别热点LPI。
骨骼区域内的总病变体积计算为PET图像中的骨骼体积内所检测的个别热点的加权体积和,其中各热点的体积由其对应LPI加权。以此方式,计算针对骨骼区域的PSMA加权的总病变体积(PLTV)指标,表示为PTLVbone。类似地,还计算针对淋巴(PTLVlymph)及***(PTLVprostate)区域的PLTV指标值。针对三个区域中的每一者,患有多种不同适应症的个体的PET/CT图像数据集用于自动测定PLTV指标值。
基于AI的自动技术的性能基于与手动器官分段的比较及图像的标注来评价以鉴别热点,且比较整个区域中针对不同适应症所计算的PLTV指标值。
使用人工专家解释作为比较的最高准则,测定自动热点检测算法,针对骨骼病变具有92.1%的敏感性(97.2%于52个自动分段骨中)及针对淋巴病变具有96.2%的敏感性。平均地,每次扫描检测到17个骨骼热点且每次扫描检测到23个淋巴热点。
PLTV指标值使用骨骼区域的197个PET/CT图像、淋巴区域的99个PET/CT图像及***区域的43个PET/CT图像的样品数据集来计算。在数据集中,所测定的94%的个别热点LPI在1与3之间,其中骨骼、淋巴及***区域所测定的最小LPI分别为0.82、1.1及1.3。骨骼、淋巴及***区域的中位LPI值分别为1.5、2.0及2.3。
针对各区域,针对患有多种不同适应症的个体,计算如下的PLTV指标:治疗反应(TR)、筛查(S)、新诊断(ND)、转移性(M)、疑似复发(SR)、复发(R)。通过计算四分位间距(interquartile range)中值的平均值(IQRmean)来比较适应症之间的PLTV指标值,因此排除离群值。通过PLTV值的IQRmean对适应症进行排序得到:针对骨骼区域的TR<S<ND<R<SR<M,针对淋巴区域的S=M<R<ND<SR及针对***区域的M<SR<R<S<ND,从而很好地与疾病状态的临床预期对准。
图19展示针对各区域的不同适应症所测定的PLTV指标值。图20展示三个区域中的每一者中所检测的热点的个别热点LPI值的散布图。
与用于测定定级病变的参考值的手动方法(例如Eiber等人,2017)相比,血液及肝脏自动参考值是基于与手动参考方法相比较大的图像体积且因此预期更稳固。图21比较针对血池(左曲线)及肝脏(右曲线)区域,经由本文中所描述的自动分段方法计算的参考值与使用器官边界的手动鉴别计算的参考值。如图21中所展示,在20次PET/CT扫描的样品中,自动与手动参考之间的相关性(皮尔森相关系数(Pearson'r))针对血液为0.92且针对肝脏为0.87。
因此,此实例表明使用自动分段、热点检测及指标值计算以检测癌症且跟踪随时间推移的癌症进展和/或对治疗的反应。
D.成像剂
在某些实施例中,3D功能图像为使用包括放射性药品的成像剂的核医学图像。核医学图像是在向患者投予放射性药品后获得,且提供关于放射性药品在患者内的分布的信息。放射性药品为包括放射性核种的化合物。
核医学图像(例如PET扫描;例如SPECT扫描;例如全身扫描;例如复合PET-CT图像;例如复合SPECT-CT图像)检测从放射性药品的放射性核种发射的辐射以形成图像。特定放射性药品在患者内的分布可通过生物机制(例如血流或灌注)以及通过特异性酶促或受体结合相互作用来测定。不同放射性药品可经设计以利用不同生物机制和/或特定特异性酶促或受体结合相互作用,且因此在向患者投予时,选择性地集中在患者内的特定类型组织和/或区域内。较大的辐射量从患者体内具有比其它区域更高浓度的放射性药品的区域发射,使得这些区域在核医学图像中看起来更亮。因此,核医学图像内的强度变化可用于映射放射性药品在患者体内的分布。放射性药品在患者内的此映射分布可用于例如推断患者身体的不同区域内癌组织的存在。
举例来说,在向患者投予后,鎝99m亚甲基二膦酸酯(99mTc MDP)选择性地积累在患者的骨架区域内,尤其在与恶性骨病变相关的异常成骨的位点处。放射性药品在这些位点处的选择性浓度在核医学图像中产生高强度的可鉴别的热点-局部化区域。因此,与转移性***癌相关的恶性骨病变的存在可通过鉴别患者的全身扫描内的这些热点来推断。与患者总存活率及指示疾病状态、进展、治疗功效及其类似者的其它预后度量相关的风险指标可基于在向患者投予99mTc MDP后所获得的全身扫描中的强度变化的自动分析来计算。在某些实施例中,也可以与99mTc MDP的类似方式使用其它放射性药品。
在某些实施例中,所使用的特定放射性药品视所使用的特定核医学成像模式而定。举例来说,18F氟化钠(NaF)也在骨骼病变中积累(类似于99mTc MDP),但可用于PET成像。在某些实施例中,PET成像也可利用放射性形式的维生素胆碱,其易于由***癌细胞吸收。
在某些实施例中,可使用选择性结合到特定蛋白质或所关注受体的放射性药品(尤其在癌组织中增加其表达的那些)。这些蛋白质或所关注受体包含(但不限于)肿瘤抗原,例如CEA,其表达于结肠直肠癌中;Her2/neu,其表达于多种癌症中;BRCA 1及BRCA 2,其表达于乳癌及卵巢癌中;及TRP-1及TRP-2,其表达于黑素瘤中。
举例来说,人类***特异性膜抗原(PSMA)在***癌,包含转移性疾病中上调。几乎所有***癌表达PSMA且其表达在低分化的转移性及激素难治性癌瘤中进一步增加。因此,用一或多个放射性核种标记的对应于PSMA结合剂的放射性药品(例如,对PSMA具有高亲和力的化合物)可用于获得患者的核医学图像,可从所述核医学图像评估患者的多个区域(例如,包含(但不限于)骨骼区域)内***癌的存在和/或状态。在某些实施例中,当疾病处于局部状态时,使用PSMA结合剂所获得的核医学图像用于鉴别***内癌组织的存在。在某些实施例中,当疾病为转移性时,使用包括PSMA结合剂的放射性药品所获得的核医学图像用于鉴别多个区域内的癌组织的存在,所述区域不仅包含***,而且包含本身有关的其它器官及组织区域,例如肺、***及骨。
特定地说,在向患者投予后,放射性核种标记的PSMA结合剂基于其对PSMA的亲和力选择性地积累在癌组织内。在上文所描述关于99mTc MDP的那种类似方式中,放射性核种标记的PSMA结合剂在患者内的特定位点处的选择性浓度在核医学图像中产生可检测热点。当PSMA结合剂集中在表达PSMA的身体的多个癌组织及区域内时,患者的***内的局部癌症和/或患者身体的不同区域中的转移癌可经检测及评价。如下文中所描述,与患者总存活率及指示疾病状态、进展、治疗功效及其类似者的其它预后度量相关的风险指标可基于在向患者投予PSMA结合剂放射性药品后所获得的核医学图像中的强度变化的自动分析来计算。
多种放射性核种标记的PSMA结合剂可用作核医学成像的放射性药品成像剂以检测及评价***癌。在某些实施例中,使用的特定放射性核种标记的PSMA结合剂视因素,例如特定成像模式(例如,PET;例如SPECT)及待成像的患者的特定区域(例如,器官)而定。举例来说,某些放射性核种标记的PSMA结合剂适合于PET成像,而其它适合于SPECT成像。举例来说,某些放射性核种标记的PSMA结合剂有助于使患者的***成像且主要在疾病经局部化时使用,而其它有助于使遍及患者身体的器官及区域成像且适用于评价转移性***癌。
多种PSMA结合剂及其放射性核种标记版本描述于美国专利第8,778,305号、第8,211,401号及第8,962,799号中,其中的每一者以全文引用的方式并入本文中。
i.PET成像放射性核种标记的PSMA结合剂
在某些实施例中,放射性核种标记的PSMA结合剂为适合于PET成像的放射性核种标记的PSMA结合剂。
在某些实施例中,放射性核种标记的PSMA结合剂包括[18F]DCFPyL(又称作PyLTM;又称作DCFPyL-18F):
Figure BDA0003151015600000661
或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括[18F]DCFBC:
Figure BDA0003151015600000662
或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括68Ga-PSMA-HBED-CC(亦称作68Ga-PSMA-11):
Figure BDA0003151015600000671
或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括PSMA-617:
Figure BDA0003151015600000672
或其药学上可接受的盐。在某些实施例中,放射性核种标记的PSMA结合剂包括68Ga-PSMA-617(其为用68Ga标记的PSMA-617)或其药学上可接受的盐。在某些实施例中,放射性核种标记的PSMA结合剂包括177Lu-PSMA-617(其为用177Lu标记的PSMA-617)或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括PSMA-I&T:
Figure BDA0003151015600000673
Figure BDA0003151015600000681
或其药学上可接受的盐。在某些实施例中,放射性核种标记的PSMA结合剂包括68Ga-PSMA-I&T(其为用68Ga标记的PSMA-I&T)或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括PSMA-1007:
Figure BDA0003151015600000682
或其药学上可接受的盐。在某些实施例中,放射性核种标记的PSMA结合剂包括18F-PSMA-1007(其为用18F标记的PSMA-1007)或其药学上可接受的盐。
ii.SPECT成像放射性核种标记的PSMA结合剂
在某些实施例中,放射性核种标记的PSMA结合剂为适合于SPECT成像的放射性核种标记的PSMA结合剂。
在某些实施例中,放射性核种标记的PSMA结合剂包括1404(又称作MIP-1404):
Figure BDA0003151015600000683
或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括1405(又称作MIP-1405):
Figure BDA0003151015600000691
或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括1427(又称作MIP-1427):
Figure BDA0003151015600000692
或其药学上可接受的盐。
在某些实施例中,放射性核种标记的PSMA结合剂包括1428(又称作MIP-1428):
Figure BDA0003151015600000701
或其药学上可接受的盐。
在某些实施例中,PSMA结合剂利用放射性核种,通过将其螯合到金属的放射性同位素[例如,鎝(Tc)的放射性同位素(例如,鎝99m(99mTc));例如铼(Re)的放射性同位素(例如,铼188(188Re);例如铼186(186Re));例如钇(Y)的放射性同位素(例如,90Y);例如镏(Lu)的放射性同位素(例如,177Lu);例如镓(Ga)的放射性同位素(例如68Ga;例如67Ga);例如铟的放射性同位素(例如,111In);例如铜(Cu)的放射性同位素(例如,67Cu)]来标记。
在某些实施例中,1404用放射性核种标记(例如,螯合到金属的放射性同位素)。在某些实施例中,放射性核种标记的PSMA结合剂包括99mTc-MIP-1404,其为用(例如,螯合到)99mTc标记的1404:
Figure BDA0003151015600000702
或其药学上可接受的盐。在某些实施例中,可将1404螯合到其它金属放射性同位素[例如,铼(Re)的放射性同位素(例如,铼188(188Re);例如铼186(186Re));例如钇(Y)的放射性同位素(例如,90Y);例如镏(Lu)的放射性同位素(例如,177Lu);例如镓(Ga)的放射性同位素(例如68Ga;例如67Ga);例如铟的放射性同位素(例如,111In);例如铜(Cu)的放射性同位素(例如,67Cu)]以形成化合物,所述化合物具有与上文对于99mTc-MIP-1404所展示的结构类似的结构,其中另一金属放射性同位素取代99mTc。
在某些实施例中,1405用放射性核种(例如,螯合到金属的放射性同位素)来标记。在某些实施例中,放射性核种标记的PSMA结合剂包括99mTc-MIP-1405,其为用(例如,螯合到)99mTc标记的1405:
Figure BDA0003151015600000711
或其药学上可接受的盐。在某些实施例中,可将1405螯合到其它金属放射性同位素[例如,铼(Re)的放射性同位素(例如,铼188(188Re);例如铼186(186Re));例如钇(Y)的放射性同位素(例如,90Y);例如镏(Lu)的放射性同位素(例如,177Lu);例如镓(Ga)的放射性同位素(例如68Ga;例如67Ga);例如铟的放射性同位素(例如,111In);例如铜(Cu)的放射性同位素(例如,67Cu)]以形成化合物,所述化合物具有与上文对于99mTc-MIP-1405所展示的结构类似的结构,其中另一金属放射性同位素取代99mTc。
在某些实施例中,1427用(例如,螯合到)金属的放射性同位素标记,以形成根据下式的化合物:
Figure BDA0003151015600000712
Figure BDA0003151015600000721
或其药学上可接受的盐,其中M为标记1427的金属放射性同位素[例如,鎝(Tc)的放射性同位素(例如,鎝99m(99mTc));例如铼(Re)的放射性同位素(例如,铼188(188Re);例如铼186(186Re));例如钇(Y)的放射性同位素(例如,90Y);例如镏(Lu)的放射性同位素(例如,177Lu);例如镓(Ga)的放射性同位素(例如,68Ga;例如67Ga);例如铟的放射性同位素(例如,111In);例如铜(Cu)的放射性同位素(例如,67Cu)]。
在某些实施例中,1428用(例如,螯合到)金属的放射性同位素标记,以形成根据下式的化合物:
Figure BDA0003151015600000722
或其药学上可接受的盐,其中M为标记1428的金属放射性同位素[例如,鎝(Tc)的放射性同位素(例如,鎝99m(99mTc));例如铼(Re)的放射性同位素(例如,铼188(188Re);例如铼186(186Re));例如钇(Y)的放射性同位素(例如,90Y);例如镏(Lu)的放射性同位素(例如,177Lu);例如镓(Ga)的放射性同位素(例如,68Ga;例如67Ga);例如铟的放射性同位素(例如,111In);例如铜(Cu)的放射性同位素(例如,67Cu)]。
在某些实施例中,放射性核种标记的PSMA结合剂包括PSMA I&S:
Figure BDA0003151015600000723
或其药学上可接受的盐。在某些实施例中,放射性核种标记的PSMA结合剂包括99mTc-PSMA I&S(其为用99mTc标记的PSMA I&S)或其药学上可接受的盐。
E.计算机***及网络架构
如图17中所展示,展示且描述用于提供本文中所描述的***、方法及架构的网络环境1700的实施方案。简单概述,现参看图17,展示且描述示范性云端计算环境1700的框图。云端计算环境1700可包含一或多个资源提供者1702a、1702b、1702c(总体来说,1702)。各资源提供者1702可包含计算资源。在一些实施方案中,计算资源可包含用于处理数据的任何硬件和/或软件。举例来说,计算资源可包含能够执行算法、计算机程序和/或计算机应用程序的硬件和/或软件。在一些实施方案中,示范性计算资源可包含具有存储及检索能力的应用服务器和/或数据库。各资源提供者1702可与云端计算环境1700中的任何其它资源提供者1702连接。在一些实施方案中,资源提供者1702可经计算机网络1708连接。各资源提供者1702可经计算机网络1708,与一或多个计算装置1704a、1704b、1704c(总体来说,1704)连接。
云端计算环境1700可包含资源管理器1706。资源管理器1706可经计算机网络1708与资源提供者1702及计算装置1704连接。在一些实施方案中,资源管理器1706可通过一或多个资源提供者1702有助于将计算资源提供到一或多个计算装置1704。资源管理器1706可接收来自特定计算装置1704的对于计算资源的请求。资源管理器1706可鉴别能够提供由计算装置1704请求的计算资源的一或多个资源提供者1702。资源管理器1706可选择资源提供者1702以提供计算资源。资源管理器1706可有助于资源提供者1702与特定计算装置1704之间的连接。在一些实施方案中,资源管理器1706可建立特定资源提供者1702与特定计算装置1704之间的连接。在一些实施方案中,资源管理器1706可将特定计算装置1704再导向到具有所请求的计算资源的特定资源提供者1702。
图18展示可用于实施本发明中描述的技术的计算装置1800及移动计算装置1850的实例。计算装置1800打算表示各种形式的数字计算机,例如膝上型计算机、台式计算机、工作站、个人数字助理、服务器、刀锋型服务器、大型计算机及其它合适的计算机。移动计算装置1850打算表示各种形式的移动装置,例如个人数字助理、蜂窝蜂窝式电话、智能型电话及其它类似计算装置。此处展示的组件、其连接及关系以及其功能仅打算为实例,且不打算为限制。
计算装置1800包含处理器1802、存储器1804、存储装置1806、连接到存储器1804及多个高速扩充端口1810的高速接口1808以及连接到低速扩充端口1814及存储装置1806的低速接口1812。处理器1802、存储器1804、存储装置1806、高速接口1808、高速扩充端口1810及低速接口1812中的每一者使用各种总线互连,且可安装在共同母板上或视需要以其它方式安装。处理器1802可处理用于在计算装置1800内执行的指令,包含存储于存储器1804中或在存储装置1806上的指令,以在外部输入/输出装置(例如耦接到高速接口1808的显示器1816)上显示GUI的图形信息。在其它实施方案中,可视需要连同多个存储器及存储器类型一起使用多个处理器和/或多个总线。另外,可将多个计算装置与提供必需操作的部分的各装置连接(例如,作为服务器库、一组刀锋服务器或多处理器***)。因此,当术语用于本文中时,其中多个功能描述为由“处理器”执行,此涵盖其中多个功能由任何数目的计算装置(一或多个)的任何数目的处理器(一或多个)执行的实施例。此外,当功能描述为由“处理器”执行时,此涵盖其中功能由任何数目的计算装置(一或多个)(例如,在分布式计算***中)的任何数目的处理器(一或多个)执行的实施例。
存储器1804将信息存储于计算装置1800内。在一些实施方案中,存储器1804为一或多个易失性存储器单元。在一些实施方案中,存储器1804为一或多个非易失性存储器单元。存储器1804也可为另一种形式的计算机可读媒体,例如磁碟或光盘。
存储装置1806能够为计算装置1800提供大量存储。在一些实施方案中,存储装置1806可为或含有计算机可读媒体,例如软碟装置、硬盘装置、光盘装置或磁带装置、快闪存储器或其它类似固态存储器装置或装置的阵列,包含呈存储网络局域网或其它配置形式的装置。指令可存储于信息载体中。指令在由一或多个处理装置(例如处理器1802)执行时,执行一或多种方法,例如上文所述的那些方法。指令也可由一或多个存储装置(例如计算机可读媒体或机器可读媒体(例如存储器1804、存储装置1806或处理器1802上的存储器)存储。
高速接口1808管理针对计算装置1800的带宽密集型操作,而低速接口1812管理带宽密集性较低的操作。此类功能的布置仅为实例。在一些实施方案中,将高速接口1808耦接到存储器1804、显示器1816(例如经由图形处理器或加速器)及高速扩充端口1810,其可容纳各种扩充卡(未展示)。在实施方案中,将低速接口1812耦接到存储装置1806及低速扩充端口1814。可包含各种通信端口(例如USB、
Figure BDA0003151015600000741
网络以太网、无线网络以太网)的低速扩充端口1814可例如经由网络适配器耦接到一或多个输入/输出装置,例如键盘、指向装置、扫描器或网络连接装置(例如交换器或路由器)。
计算装置1800可以多种不同形式实施,如图式中所展示。举例来说,其可作为标准服务器1820或多次以这些服务器的群组实施。另外,其可以个人计算机(例如膝上型计算机1822)的形式实施。其也可实施为框架服务器***1824的一部分。可替代地,来自计算装置1800的组件可与例如移动计算装置1850的移动装置中的其它组件(未展示)组合。这些装置中的每一者可含有计算装置1800及移动计算装置1850中的一或多者,且整个***可由彼此通信的多个计算装置构成。
移动计算装置1850包含处理器1852、存储器1864、输入/输出装置(例如显示器1854)、通信接口1866及收发器1868以及其它组件。移动计算装置1850也可具备存储装置(例如微驱动或其它装置)以提供额外存储。处理器1852、存储器1864、显示器1854、通信接口1866及收发器1868中的每一者使用各种总线互连,且组件中的若干者可安装在共同母板上或视需要以其它方式安装。
处理器1852可执行在移动计算装置1850内的指令,包含存储于存储器1864中的指令。处理器1852可实施为包含独立及多个模拟及数字处理器的芯片的芯片组。处理器1852可提供例如移动计算装置1850的其它组件(例如用户接口的控制件、由移动计算装置1850运行的应用程序及利用移动计算装置1850的无线通信)的协作关系。
处理器1852可经由控制接口1858及耦接到显示器1854的显示接口1856与用户通信。显示器1854可为例如TFT(薄膜晶体管液晶显示器)显示器或有机发光二极管(OrganicLight Emitting Diode;OLED)显示器或其它合适的显示器技术。显示接口1856可包括用于驱动显示器1854以将图形及其它信息呈现到用户的合适电路。控制接口1858可接收来自用户的命令且将其转化用以呈递到处理器1852。此外,外部接口1862可提供与处理器1852的通信,以使移动计算装置1850与其它装置的附近区域通信能够达成。外部接口1862可例如在一些实施方案中提供有线通信,或在其它实施方案中提供无线通信,且也可使用多个接口。
存储器1864将信息存储于移动计算装置1850内。存储器1864可实施为以下中的一或多者:一或多个计算机可读媒体或媒介、一或多个易失性存储器单元或一或多个非易失性存储器单元。扩充存储器1874也可提供且经由扩充接口1872与移动计算装置1850连接,所述扩充接口1872可包含例如单列式存储器模块(Single In Line Memory Module;SIMM)卡接口。扩充存储器1874可提供用于移动计算装置1850的额外存储空间,或也可存储用于移动计算装置1850的应用程序或其它信息。特定地说,扩充存储器1874可包含进行或补充上文所描述的处理的指令,且还可包含安全信息。因此,举例来说,扩充存储器1874可提供为移动计算装置1850的安全模块,且可用准许安全使用移动计算装置1850的指令编程。另外,可经由SIMM卡提供安全应用程序以及额外信息,例如以不可侵入方式将鉴别信息放置于SIMM卡上。
存储器可包含例如快闪存储器和/或NVRAM存储器(非易失性随机存取存储器),如下文所论述。在一些实施方案中,指令存储于信息载体中。指令在由一或多个处理装置(例如处理器1852)执行时,实施一或多种方法,例如上文所述的那些方法。指令也可由一或多个存储装置,例如一或多个计算机可读媒体或机器机器可读媒体(例如存储器1864、扩充存储器1874或处理器1852上的存储器)存储。在一些实施方案中,指令可以传播信号形式例如经由收发器1868或外部接口1862接收。
移动计算装置1850可经由通信接口1866无线通信,必要时所述通信接口1866可包含数字信号处理电路。通信接口1866可提供各种模式或协议下的通信,例如GSM话音呼叫(全球移动通信***)、短消息服务(Short Message Service;SMS)、增强消息服务(Enhanced Messaging Service;EMS)或MMS传信(多媒体消息服务)、码分多址(codedivision multiple access;CDMA)、时分多址(time division multiple access;TDMA)、个人数字蜂窝(Personal Digital Cellular;PDC)、宽带码分多址(Wideband CodeDivision Multiple Access;WCDMA)、CDMA2000或通用包无线电服务(General PacketRadio Service;GPRS)以及其它。这些通信可例如经由收发器1868使用射频进行。另外,可例如使用
Figure BDA0003151015600000761
Wi-FiTM或其它此类收发器(未展示)来进行短程通信。另外,全球定位***(Global Positioning System;GPS)接收器模块1870可将额外的导航有关及位置有关无线数据提供到移动计算装置1850,所述无线数据可视需要由移动计算装置1850上运行的应用程序来使用。
移动计算装置1850也可使用音频编解码器1860有声地通信,所述音频编解码器1860可接收来自用户的语音信息并且将其转化成可用数字信息。音频编解码器1860可同样地对用户产生可听声音,例如经由例如在移动计算装置1850的听筒中的扬声器。此类声音可包含来自话音电话呼叫的声音,可包含所记录的声音(例如话音频息、音乐文件等)且还可包含由移动计算装置1850上操作的应用程序产生的声音。
移动计算装置1850可以多种不同形式实施,如图式中所展示。举例来说,其可实施为蜂窝蜂窝式电话1880。其还可实施为智能型电话1882、个人数字助理或其它类似移动装置的部分。
本文所描述的***及技术的各种实施方案可以数字电子电路、集成电路、专门设计的ASIC(特定应用集成电路)、计算机硬件、固件、软件和/或其组合形式实现。这些各种实施方案可包含一或多个计算机程式中的实施方案,所述计算机程式可执行和/或可译于包含至少一个可编程处理器的可编程***上,所述可编程处理器可为专用或通用,经耦合以接收来自以下的数据及指令且将数据及指令传送到以下:存储***、至少一个输入装置及至少一个输出装置。
这些计算机程序(另外已知为程序、软件、软件应用程序或程序码)包含可编程处理器的机器指令,且可以高级程序和/或面向对象的编程语言形式和/或以组装件/机器语言形式实施。如本文中所使用,术语机器可读媒体及计算机可读媒体是指用于将机器指令和/或数据提供到可编程处理器的任何计算机程序产品、设备和/或装置(例如磁盘、光盘、存储器、可编程逻辑装置(Programmable Logic Device;PLD)),包含接收呈机器可读信号形式的机器指令的机器可读媒体。术语机器可读信号是指用于将机器指令和/或数据提供到可编程处理器的任何信号。
为提供与用户的交互,本文所描述的***及技术可实施于具有以下的计算机上:显示装置(例如阴极光线套管(cathode ray tube;CRT)或液晶显示(liquid crystaldisplay;LCD)监测器),其用于向用户显示信息;以及键盘及指向装置(例如鼠标或轨迹球),用户通过其可将输入提供到计算机。其它类型的装置也可用于提供与用户的交互;举例来说,向用户提供的反馈可为任何形式的感觉反馈(例如,视觉反馈、听觉反馈或触觉反馈);且可以任何形式接收来自用户的输入,包含声学、话音或触觉输入。
本文所描述的***及技术可实施于计算***中,所述计算***包含后端组件(例如,作为数据服务器)或包含中间软件组件(例如,应用程序服务器)或包含前端组件(例如,具有图形用户接口或用户可经由其与本文所描述的***及技术的实施交互的网络浏览器的客户端计算机)或这些后端、中间软件或前端组件的任何组合。***的组件可由任何形式或媒体的数字数据通信(例如,通信网络)互连。通信网络的实例包含网络局域网(localarea network;LAN)、网络广域网(wide area network;WAN)及网络因特网。
计算***可包含客户端及服务器。客户端及服务器大体上彼此远离且通常经由通信网络交互。客户端与服务器的关系借助于在各别计算机上运行且彼此具有主从关系的计算机程序产生。
在一些实施方案中,本文中所描述的各种模块可经分离、组合或并入单一或经组合模块中。图式中所描绘的模块并不打算将本文中所描述的***限制于其中所展示的软件架构。
本文中所描述的不同实施方案的元件可经组合以形成上文不特定阐述的其它实施方案。元件可从本文中所描述的处理、计算机程序、数据库等移出而不有害地影响其操作。另外,图式中所描绘的逻辑流程并不需要所展示的特定次序或依序次序以达成所需结果。可将各种独立元件组合成一或多个个别元件以执行本文中所描述的功能。
在整个描述中,其中将设备及***描述为具有、包含或包括特定组件,或其中将工艺及方法描述为具有、包含或包括特定步骤,另外,打算存在基本上由所叙述的组件组成或由其组成的本发明的设备及***,且存在基本上由所叙述的处理步骤组成或由其组成的根据本发明的工艺及方法。
应理解,步骤次序或执行某一动作的次序并不重要,只要本发明保持可操作即可。此外,可同时进行两个或多于两个步骤或动作。
虽然已参考特定的优选实施例具体地展示及描述本发明,但熟习所属领域者应理解,在不脱离如所附权利要求书所定义的本发明的精神及范围的情况下,本文中可对形式及细节做出各种改变。
除非技术上不兼容,否则本发明的各种描述实施例可联合一或多个其它实施例使用。
虽然已参考特定的优选实施例具体地展示及描述本发明,但熟习所属领域者应理解,在不脱离如所附权利要求书所定义的本发明的精神及范围的情况下,本文中可对形式及细节做出各种改变。

Claims (116)

1.一种用于自动处理3D图像以鉴别所述3D图像内对应于特定目标组织区域的3D体积的方法,所述方法包括:
(a)通过计算装置的处理器接收使用解剖成像模式所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织的图形表示;
(b)针对多个目标组织区域中的每一者,通过所述处理器,使用一或多个机器学习模块来自动鉴别所述3D解剖图像内的对应目标所关注体积(VOI);
(c)通过所述处理器测定表示多个3D分段掩模的3D分段图,各3D分段掩模表示特定鉴别的目标VOI;及
(d)存储和/或提供所述3D分段图以用于显示和/或进一步处理。
2.根据权利要求1所述的方法,其中所述3D解剖图像为全身图像。
3.根据权利要求1或2所述的方法,其中步骤(c)包括将所述多个3D分段掩模以数字方式拼接在一起以形成所述3D分段图。
4.根据前述权利要求中任一权利要求所述的方法,其中针对至少一个特定目标组织区域,步骤(b)包括:
使用第一模块测定所述3D解剖图像内的初始VOI,所述初始VOI对应于含有所述特定目标组织区域的解剖区域;及
使用第二模块鉴别所述初始VOI内的对应于所述特定目标组织区域的所述目标VOI。
5.根据权利要求4所述的方法,其中所述第二模块为实施CNN的CNN模块。
6.根据权利要求4或5所述的方法,其中所述第一模块为CNN模块,其实施CNN以执行粗略分段来自动鉴别对应于含有所述特定目标组织区域的所述解剖区域的所述初始VOI。
7.根据权利要求4至6中任一权利要求所述的方法,其中所述第一模块接收所述解剖图像的子采样版本作为输入且使用所述解剖图像的所述子采样版本鉴别所述初始VOI。
8.根据权利要求4至7中任一权利要求所述的方法,其中所述第一模块为第一CNN模块且所述第二模块为第二CNN模块,且其中所述第一CNN模块包括额外滤波器以便解释图像大小相对于所述第二CNN模块增大的变化率。
9.根据权利要求4至8中任一权利要求所述的方法,其中所述3D解剖图像为全身图像且其中步骤(b)包括:
使用一或多个实施机器学习技术的定位模块来自动测定所述3D解剖图像内的多个初始VOI,各初始VOI对应于特定解剖区域且所述目标VOI的相关子集位于其中;及
针对各初始VOI,使用一或多个实施机器学习技术的分段模块来自动鉴别所述目标VOI的相关子集。
10.根据权利要求9所述的方法,其中所述多个初始VOI包括一或多个选自由以下组成的群组的成员:
对应于所述个体的骨盆区域的骨盆区域初始VOI;
对应于所述个体的脊柱的脊柱区域初始VOI;
对应于所述个体的上半身的左侧的左上半身区域初始VOI;及
对应于所述个体的上半身的右侧的右上半身区域初始VOI。
11.根据前述权利要求中任一权利要求所述的方法,其进一步包括:
(e)通过所述处理器接收使用功能成像模式所获得的所述个体的3D功能图像;及
(f)通过所述处理器使用所述3D分段图在所述3D功能图像内鉴别一或多个各自对应于所鉴别的目标VOI的3D体积。
12.根据权利要求11所述的方法,其包括:
(g)通过所述处理器测定所述个体的癌症状态。
13.根据权利要求12所述的方法,其包括针对在不同时间点采集的多个解剖及对应功能图像反复地执行步骤(a)至(g)以测定在各个时间点所述个体的癌症状态,借此跟踪随时间推移的癌症状态。
14.根据权利要求11至13中任一权利要求所述的方法,其包括:
(h)通过所述处理器自动调节所述3D功能图像的立体像素强度以校正一或多个背景组织区域中的背景吸收。
15.根据权利要求14所述的方法,其中所述目标组织区域包括所述一或多个背景组织区域且其中步骤(h)包括:
使用所述3D分段图以在所述3D功能图像内鉴别一或多个3D背景组织体积,其各自对应特定背景组织区域;及
基于所述3D背景组织体积内的立体像素强度调节所述3D功能图像的立体像素强度。
16.根据权利要求14或15所述的方法,其中所述一或多个背景组织区域包括一或多个选自由以下组成的群组的成员:膀胱、肾脏、十二指肠、小肠、脾、肝脏、胰脏、胃、肾上腺、直肠及睾丸。
17.根据权利要求11至16中任一权利要求所述的方法,其包括:
(i)通过所述处理器自动检测所述3D功能图像内的一或多个热点,所述热点基于所述3D功能图像内的立体像素强度经测定以表示病变。
18.根据权利要求17所述的方法,其中步骤(i)包括使用一或多个阈值。
19.根据权利要求17或18中任一权利要求所述的方法,其中步骤(i)包括将一或多个滤波器应用于所述3D功能图像。
20.根据权利要求17至19中任一权利要求所述的方法,其中步骤(i)包括使用两种或多于两种技术的组合以鉴别所述3D功能图像内所鉴别的所述一或多个3D体积的不同子集中的热点。
21.根据权利要求17至20中任一权利要求所述的方法,其中步骤(i)包括检测热点的初始集合,且针对所述初始集合的所述热点的至少一部分,将经检测热点的至少一部分中的每一热点分类为癌病变或非癌病变。
22.根据权利要求17至21中任一权利要求所述的方法,其中所述目标组织区域包括一或多个背景组织区域且其中所述方法包括:
使用所述3D分段图以在所述3D功能图像内鉴别一或多个3D背景组织体积,其各自对应特定背景组织区域;及
从用于在步骤(i)处自动检测所述一或多个热点的所述立体像素中排除所述3D背景组织内的所述3D立体像素。
23.根据权利要求17至22中任一权利要求所述的方法,其包括使用所述一或多个经检测热点来测定所述个体的癌症状态。
24.根据权利要求17至23中任一权利要求所述的方法,其中所述目标组织区域包括一或多个参考组织区域且其中所述方法包括:
使用所述3D分段图以通过所述处理器在所述3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;
通过所述处理器测定一或多个参考强度值,其各自与所述一或多个3D参考体积的特定3D参考体积相关且对应于所述特定3D参考体积内的强度测量值;
通过所述处理器测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分中的特定热点相关且对应于所述特定热点的强度测量值;及
通过所述处理器,使用所述一或多个个别热点强度值及所述一或多个参考强度值测定一或多个个别热点指标值。
25.根据权利要求24所述的方法,其中测定所述一或多个个别热点指标值包括将所述一或多个参考强度值中的每一者按一定比例映射到对应参考指标值,且针对各个别热点强度值,使用所述参考强度值及对应参考指标值以内插对应个别热点指标值。
26.根据权利要求24或25所述的方法,其中所述参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉及腮腺。
27.根据权利要求24至26中任一权利要求所述的方法,其中:
第一参考强度值(i)为与对应于主动脉部分的3D参考体积相关的血液参考强度值,且(ii)映射到第一参考指标值;
第二参考强度值(i)为与对应于肝脏的3D参考体积相关的肝脏参考强度值,且(ii)映射到第二参考指标值;及
所述第二参考强度值大于所述第一参考强度值且所述第二参考指标值大于所述第一参考指标值。
28.根据权利要求24至27中任一权利要求所述的方法,其中所述参考强度值包括映射到最大参考指标值的最大参考强度值,且其中具有大于所述最大参考强度值的相关热点强度值的热点经分配等于所述最大参考指标值的热点指标值。
29.根据权利要求24至28中任一权利要求所述的方法,其包括通过所述处理器使用所述一或多个热点指标值的至少一部分测定指示所述个体的癌症状态的总体指标值。
30.根据权利要求29所述的方法,其中所述总体指标值经测定为所述个别热点指标值的至少一部分的加权和。
31.根据权利要求29至30所述的方法,其中:
所述总体指标值与对应于所述解剖图像内所鉴别的特定目标VOI的特定目标组织区域相关;及
所述总体指标值是使用位于所述3D功能图像中对应于所述特定鉴别的目标VOI的特定3D体积内的热点子集的热点指标值来测定。
32.根据权利要求31所述的方法,其中所述特定目标组织区域是选自由以下组成的群组:包括所述个体的一或多个骨的骨骼区域、淋巴区域及***区域。
33.根据权利要求11至32中任一权利要求所述的方法,其中:
所述3D解剖图像为x射线计算机断层摄影术(CT)图像,且
所述3D功能图像为3D单光子发射计算机断层摄影术(SPECT)图像。
34.根据权利要求11至32中任一权利要求所述的方法,其中:
所述3D解剖图像为x射线计算机断层摄影术(CT)图像,且
所述3D功能图像为3D正电子发射断层摄影术(PET)图像。
35.根据权利要求34所述的方法,其中在向所述个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得所述个体的所述3D PET图像。
36.根据权利要求35所述的方法,其中所述放射性药品包括[18F]DCFPyL。
37.根据前述权利要求中任一权利要求所述的方法,其中步骤(b)包括通过所述处理器裁剪所述3D解剖图像以去除表示空气的立体像素。
38.根据前述权利要求中任一权利要求所述的方法,其中所述目标组织区域包括一或多个选自由以下组成的群组的成员:左髋骨、右髋骨、骶骨及尾骨区域、左锁骨、右锁骨、左肋、右肋、左肩胛骨、右肩胛骨、胸骨、腰椎、胸椎、颅骨、颈椎、左股骨、右股骨、左肱骨、右肱骨、***、膀胱、直肠、左臀大肌、右臀大肌、主动脉(例如胸部主动脉部分;例如腹部主动脉部分)、左肾脏、右肾脏、肝脏、左肺、右肺、脾、脑室、左肾上腺、右肾上腺、胆囊、大脑、胰脏、心脏、下颌骨、左支气管、右支气管、气管、左髂总动脉、右髂总动脉及腮腺。
39.根据前述权利要求中任一权利要求所述的方法,其中所述目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左股骨、右股骨、左腓骨、右腓骨、左髋骨、右髋骨、左肱骨、右肱骨、下颌骨、左髌骨、右髌骨、左桡骨、右桡骨、左胫骨、右胫骨、左尺骨、右尺骨、左肋、右肋、骶骨及尾骨、左肩胛骨、右肩胛骨、颅骨、胸骨、脊椎骨区域及个别脊椎骨。
40.根据权利要求39所述的方法,其中所述目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左髋骨、右髋骨、左肋、右肋、骶骨及尾骨、左肩胛骨、右肩胛骨、胸骨、脊椎骨区域及个别脊椎骨。
41.根据前述权利要求中任一权利要求所述的方法,其中所述目标组织区域中的一或多者包括一或多个选自由以下组成的群组的软组织区域:左肾上腺、右肾上腺、主动脉、大脑、左支气管、右支气管、胆囊、左臀大肌、右臀大肌、心脏、左髂总动脉、右髂总动脉、左肾脏、右肾脏、肝脏、左肺、右肺、胰脏、***、直肠、脾、气管、膀胱、脑室及腮腺。
42.根据权利要求41所述的方法,其中所述一或多个目标组织区域包括一或多个选自由以下组成的群组的软组织区域:胆囊、左肾脏、右肾脏、肝脏、左肺、右肺、***及膀胱。
43.根据前述权利要求中任一权利要求所述的方法,其中所述目标组织区域包括一或多个各自对应于特定骨的骨区域及一或多个各自对应于特定软组织区域的软组织区域。
44.一种用于自动处理3D图像以自动鉴别个体内的癌病变的方法,所述方法包括:
(a)通过计算装置的处理器接收使用解剖成像模式所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织的图形表示;
(b)针对多个目标组织区域中的每一者,通过所述处理器,使用一或多个机器学习模块来自动鉴别所述3D解剖图像内的对应目标所关注体积(VOI);
(c)通过所述处理器测定表示多个3D分段掩模的3D分段图,各3D分段掩模表示特定鉴别的目标VOI;
(d)通过所述处理器接收使用功能成像模式所获得的所述个体的3D功能图像;
(e)使用所述3D分段图鉴别所述3D功能图像内的一或多个3D体积,其各自对应于所鉴别的目标VOI;及
(f)通过所述处理器,在所述3D功能图像内所鉴别的所述一或多个3D体积的至少一部分内自动检测一或多个热点,所述热点基于所述3D功能图像内的立体像素强度经测定以表示病变。
45.根据权利要求44所述的方法,其包括通过所述处理器使用所述一或多个经检测热点来测定所述个体的癌症状态。
46.根据权利要求44或45所述的方法,其中所述目标组织区域包括一或多个参考组织区域且其中所述方法包括:
使用所述3D分段图以通过所述处理器在所述3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;
通过所述处理器测定一或多个参考强度值,其各自与所述一或多个3D参考体积的特定3D参考体积相关且对应于所述特定3D参考体积内的强度测量值;
通过所述处理器测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分中的特定热点相关且对应于所述特定热点的强度测量值;及
通过所述处理器,使用所述一或多个个别热点强度值及所述一或多个参考强度值测定一或多个个别热点指标值。
47.根据权利要求46所述的方法,其中所述参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉及腮腺。
48.根据权利要求45至47中任一权利要求所述的方法,其包括通过所述处理器使用所述一或多个热点指标值的至少一部分测定指示所述个体的癌症状态的总体指标值。
49.根据权利要求48所述的方法,其中所述总体指标值经测定为所述个别热点指标值的至少一部分的加权和。
50.根据权利要求44至49中任一权利要求所述的方法,其中:
所述3D解剖图像为x射线计算机断层摄影术(CT)图像,且
所述3D功能图像为3D正电子发射断层摄影术(PET)图像。
51.根据权利要求50所述的方法,其中在向所述个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得所述个体的所述3D PET图像。
52.根据权利要求51所述的方法,其中所述放射性药品包括[18F]DCFPyL。
53.一种用于自动处理3D图像以鉴别及测量放射性药品在患有癌症或处于其风险下的个体内的癌病变中的吸收的方法,所述方法包括:
(a)通过计算装置的处理器接收使用解剖成像模式所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织的图形表示;
(b)通过所述处理器使用一或多个机器学习模块在所述3D解剖图像内自动鉴别:
第一骨骼体积,其包括所述个体的一或多个骨的图形表示;
第一主动脉体积,其包括所述个体的主动脉的至少一部分的图形表示;及
第一肝脏体积,其包括所述个体的肝脏的图形表示;
(c)通过所述处理器测定表示多个3D分段掩模的3D分段图,所述3D分段掩模包含表示经鉴别的第一骨骼体积的骨骼掩模、表示经鉴别的第一主动脉体积的主动脉掩模及表示经鉴别的第一肝脏体积的肝脏掩模;
(d)通过所述处理器接收使用功能成像模式所获得的所述个体的3D功能图像;
(e)在所述3D功能图像内使用所述3D分段图自动鉴别:
第二骨骼体积,其对应于所述3D解剖图像内的所述第一鉴别骨骼体积;
第二主动脉体积,其对应于所述3D解剖图像内所鉴别的所述第一主动脉体积;及
第二肝脏体积,其对应于所述3D解剖图像内所鉴别的所述第一肝脏体积;
(f)通过所述处理器,在所述第二骨骼体积内自动检测一或多个热点,所述热点基于所述第二骨骼体积内的立体像素强度经测定以表示病变;及
(g)针对一或多个经检测热点中的每一者,通过所述处理器通过以下方式来测定个别热点指标值:
基于所述第二主动脉体积内的立体像素的强度测量值测定主动脉参考强度水平;
基于所述第二肝脏体积内的立体像素的强度测量值测定肝脏参考强度水平;及
针对各个别的经检测热点:
基于经检测热点的立体像素的强度测量值测定对应个别热点强度水平;及
根据所述个别热点强度水平、所述主动脉参考强度水平及所述肝脏参考强度水平测定对应个别热点指标水平。
54.根据权利要求53所述的方法,其包括通过所述处理器基于所述一或多个经检测热点的至少一部分的所述个别热点指标值测定指示所述个体的癌症状态的总体指标值。
55.根据权利要求53或54所述的方法,其中所述个体患有***癌或处于其风险下。
56.根据权利要求53至55中任一权利要求所述的方法,其中:
步骤(b)包括在所述3D解剖图像内自动鉴别包括所述个体的***的图形表示的第一***体积,
在步骤(c)处测定的所述3D分段图进一步包含表示经鉴别的第一***体积的***掩模,
步骤(e)包括在所述3D功能图像内自动鉴别对应于所述3D解剖图像内的所述第一鉴别***体积的第二***体积,
步骤(f)包括自动检测所述第二***体积中的一或多个热点,且所述方法进一步包括:
通过所述处理器(i)基于位于所述第二骨骼体积中的所述一或多个经检测热点的至少一部分的所述个别热点指标值测定指示所述个体的所述一或多个骨中的病变含量的总体骨指标值;及(ii)基于位于所述第二***体积中的所述一或多个经检测热点的至少一部分的所述个别热点指标值测定指示所述个体的所述***中的病变含量的总体***指标值。
57.根据权利要求53至56中任一权利要求所述的方法,其中所述个体患有转移癌或处于其风险下。
58.一种用于自动处理不同大小的全身3D解剖图像集合以在各3D解剖图像内自动鉴别对应于特定目标组织区域的多个3D体积的方法,所述方法包括:
(a)通过计算装置的处理器接收使用解剖成像模式所获得的一或多个个体的所述3D解剖图像集合,其中所述3D解剖图像包括所述一或多个个体中的每一者内的组织的图形表示,其中所述3D解剖图像集合具有平均x维、平均y维及平均z维,其中的至少一者具有对应平均值的至少3%的标准差;及
(b)通过所述处理器使用实施CNN的定位模块,在所述3D解剖图像集合的各图像内自动测定对应于特定解剖区域的至少一个初始VOI,所述特定解剖区域包括一或多个特定相关目标组织区域,借此鉴别对应3D解剖图像的至少一个初始VOI;及
(c)针对各初始VOI,通过所述处理器使用针对与所述初始VOI对应的所述特定解剖区域相关的所述一或多个特定目标组织区域中的每一者各自实施CNN的一或多个分段模块来自动鉴别对应目标VOI。
59.一种用于自动处理3D图像以鉴别所述3D图像内对应于特定目标组织区域的3D体积的***,所述***包括:
计算装置的处理器;及
在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:
(a)接收使用解剖成像模式所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织的图形表示;
(b)针对多个目标组织区域中的每一者,使用一或多个机器学习模块自动鉴别所述3D解剖图像内的对应目标所关注体积(VOI);
(c)测定表示多个3D分段掩模的3D分段图,各3D分段掩模表示特定鉴别的目标VOI;及
(d)存储和/或提供所述3D分段图以用于显示和/或进一步处理。
60.根据权利要求59所述的***,其中所述3D解剖图像为全身图像。
61.根据权利要求59或60所述的***,其中在步骤(c)处,所述指令使所述处理器将所述多个3D分段掩模以数字方式拼接在一起以形成所述3D分段图。
62.根据权利要求59至61中任一权利要求所述的***,其中在步骤(b)处,针对至少一个特定目标组织区域,所述指令使所述处理器:
使用第一模块测定所述3D解剖图像内的初始VOI,所述初始VOI对应于含有所述特定目标组织区域的解剖区域;及
使用第二模块鉴别所述初始VOI内的对应于所述特定目标组织区域的所述目标VOI。
63.根据权利要求62所述的***,其中所述第二模块为实施CNN的CNN模块。
64.根据权利要求62或63中任一权利要求所述的***,其中所述第一模块为CNN模块,其实施CNN以执行粗略分段来自动鉴别对应于含有所述特定目标组织区域的所述解剖区域的所述初始VOI。
65.根据权利要求62至64中任一权利要求所述的***,其中所述第一模块接收所述解剖图像的子采样版本作为输入且使用所述解剖图像的所述子采样版本鉴别所述初始VOI。
66.根据权利要求62至65中任一权利要求所述的***,其中所述第一模块为第一CNN模块且所述第二模块为第二CNN模块,且其中所述第一CNN模块包括额外滤波器以便解释图像大小相对于所述第二CNN模块增大的变化率。
67.根据权利要求62至66中任一权利要求所述的***,其中所述3D解剖图像为全身图像,且其中在步骤(b)处,所述指令使所述处理器:
使用一或多个实施机器学习技术的定位模块来自动测定所述3D解剖图像内的多个初始VOI,各初始VOI对应于特定解剖区域且所述目标VOI的相关子集位于其中;及
针对各初始VOI,使用一或多个实施机器学习技术的分段模块来自动鉴别所述目标VOI的相关子集。
68.根据权利要求67所述的***,其中所述多个初始VOI包括一或多个选自由以下组成的群组的成员:
对应于所述个体的骨盆区域的骨盆区域初始VOI;
对应于所述个体的脊柱的脊柱区域初始VOI;
对应于所述个体的上半身的左侧的左上半身区域初始VOI;及
对应于所述个体的上半身的右侧的右上半身区域初始VOI。
69.根据权利要求59至68中任一权利要求所述的***,其中所述指令使所述处理器:
(e)接收使用功能成像模式所获得的所述个体的3D功能图像;及
(f)使用所述3D分段图在所述3D功能图像内鉴别一或多个3D体积,其各自对应于所鉴别的目标VOI。
70.根据权利要求69所述的***,其中所述指令使所述处理器:
(g)测定所述个体的癌症状态。
71.根据权利要求70所述的***,其中所述指令使所述处理器针对在不同时间点采集的多个解剖及对应功能图像反复地执行步骤(a)至(g)以测定在各个时间点所述个体的癌症状态,借此跟踪随时间推移的癌症状态。
72.根据权利要求69至71中任一权利要求所述的***,其中所述指令使所述处理器:
(h)自动调节所述3D功能图像的立体像素强度以校正一或多个背景组织区域中的背景吸收。
73.根据权利要求72所述的***,其中所述目标组织区域包括所述一或多个背景组织区域,且其中在步骤(h)处,所述指令使所述处理器:
使用所述3D分段图以在所述3D功能图像内鉴别一或多个3D背景组织体积,其各自对应特定背景组织区域;及
基于所述3D背景组织体积内的立体像素强度调节所述3D功能图像的立体像素强度。
74.根据权利要求72或73所述的***,其中所述一或多个背景组织区域包括一或多个选自由以下组成的群组的成员:膀胱、肾脏、十二指肠、小肠、脾、肝脏、胰脏、胃、肾上腺、直肠及睾丸。
75.根据权利要求69至74中任一权利要求所述的***,其中所述指令使所述处理器:
(i)自动检测所述3D功能图像内的一或多个热点,所述热点基于所述3D功能图像内的立体像素强度经测定以表示病变。
76.根据权利要求75所述的***,其中在步骤(i)处,所述指令使所述处理器使用一或多个阈值。
77.根据权利要求75或76所述的***,其中在步骤(i)处,所述指令使所述处理器将一或多个滤波器应用于所述3D功能图像。
78.根据权利要求75至77中任一权利要求所述的***,其中在步骤(i)处,所述指令使所述处理器使用两种或更多种技术的组合以鉴别所述3D功能图像内所鉴别的所述一或多个3D体积的不同子集中的热点。
79.根据权利要求75至78中任一权利要求所述的***,其中在步骤(i)处,所述指令使所述处理器检测热点的初始集合,且针对所述初始集合的所述热点的至少一部分,将经检测热点的至少一部分中的每一热点分类为癌病变或非癌病变。
80.根据权利要求75至79中任一权利要求所述的***,其中所述目标组织区域包括一或多个背景组织区域且其中所述指令使所述处理器:
使用所述3D分段图以在所述3D功能图像内鉴别一或多个3D背景组织体积,其各自对应特定背景组织区域;及
从用于在步骤(i)处自动检测所述一或多个热点的所述立体像素中排除所述3D背景组织内的3D立体像素。
81.根据权利要求75至80中任一权利要求所述的***,其中所述指令使所述处理器使用所述一或多个经检测热点来测定所述个体的癌症状态。
82.根据权利要求75至81中任一权利要求所述的***,其中所述目标组织区域包括一或多个参考组织区域且其中所述指令使所述处理器:
使用所述3D分段图以在所述3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;
测定一或多个参考强度值,其各自与所述一或多个3D参考体积的特定3D参考体积相关且对应于所述特定3D参考体积内的强度测量值;及
测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分中的特定热点相关且对应于所述特定热点的强度测量值;及
使用所述一或多个个别热点强度值及所述一或多个参考强度值测定一或多个个别热点指标值。
83.根据权利要求82所述的***,其中所述指令使所述处理器通过将一或多个参考强度值中的每一者按一定比例映射到对应参考指标值,且针对各个别热点强度值,使用所述参考强度值及对应参考指标值以内插对应个别热点指标值来测定所述一或多个个别热点指标值。
84.根据权利要求82或83所述的***,其中所述参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉及腮腺。
85.根据权利要求82至84中任一权利要求所述的***,其中:
第一参考强度值(i)为与对应于主动脉部分的3D参考体积相关的血液参考强度值,且(ii)映射到第一参考指标值;
第二参考强度值(i)为与对应于肝脏的3D参考体积相关的肝脏参考强度值,且(ii)映射到第二参考指标值;及
所述第二参考强度值大于所述第一参考强度值且所述第二参考指标值大于所述第一参考指标值。
86.根据权利要求82至85中任一权利要求所述的***,其中所述参考强度值包括映射到最大参考指标值的最大参考强度值,且其中具有大于所述最大参考强度值的相关热点强度值的热点经分配等于所述最大参考指标值的热点指标值。
87.根据权利要求82至86中任一权利要求所述的***,其中所述指令使所述处理器使用所述一或多个热点指标值的至少一部分测定指示所述个体的癌症状态的总体指标值。
88.根据权利要求87所述的***,其中所述总体指标值经测定为所述个别热点指标值的至少一部分的加权和。
89.根据权利要求87至88所述的***,其中:
所述总体指标值与对应于所述解剖图像内所鉴别的特定目标VOI的特定目标组织区域相关;及
所述总体指标值是使用位于所述3D功能图像中对应于所述特定鉴别的目标VOI的特定3D体积内的热点子集的热点指标值来测定。
90.根据权利要求89所述的***,其中所述特定目标组织区域是选自由以下组成的群组:包括所述个体的一或多个骨的骨骼区域、淋巴区域及***区域。
91.根据权利要求69至90中任一权利要求所述的***,其中:
所述3D解剖图像为x射线计算机断层摄影术(CT)图像,且
所述3D功能图像为3D单光子发射计算机断层摄影术(SPECT)图像。
92.根据权利要求69至90中任一权利要求所述的***,其中:
所述3D解剖图像为x射线计算机断层摄影术(CT)图像,且
所述3D功能图像为3D正电子发射断层摄影术(PET)图像。
93.根据权利要求92所述的***,其中在向所述个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得所述个体的所述3D PET图像。
94.根据权利要求93所述的***,其中所述放射性药品包括[18F]DCFPyL。
95.根据权利要求59至94中任一权利要求所述的***,其中在步骤(b)处,所述指令使所述处理器裁剪所述3D解剖图像以去除表示空气的立体像素。
96.根据权利要求59至95中任一权利要求所述的***,其中所述目标组织区域包括一或多个选自由以下组成的群组的成员:左髋骨、右髋骨、骶骨及尾骨区域、左锁骨、右锁骨、左肋、右肋、左肩胛骨、右肩胛骨、胸骨、腰椎、胸椎、颅骨、颈椎、左股骨、右股骨、左肱骨、右肱骨、***、膀胱、直肠、左臀大肌、右臀大肌、主动脉、左肾脏、右肾脏、肝脏、左肺、右肺、脾、脑室、左肾上腺、右肾上腺、胆囊、大脑、胰脏、心脏、下颌骨、左支气管、右支气管、气管、左髂总动脉、右髂总动脉及腮腺。
97.根据权利要求59至96中任一权利要求所述的***,其中所述目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左股骨、右股骨、左腓骨、右腓骨、左髋骨、右髋骨、左肱骨、右肱骨、下颌骨、左髌骨、右髌骨、左桡骨、右桡骨、左胫骨、右胫骨、左尺骨、右尺骨、左肋、右肋、骶骨及尾骨、左肩胛骨、右肩胛骨、颅骨、胸骨、脊椎骨区域及个别脊椎骨。
98.根据权利要求97所述的***,其中所述目标组织区域中的一或多者包括一或多个选自由以下组成的群组的特定骨:左锁骨、右锁骨、左髋骨、右髋骨、左肋、右肋、骶骨及尾骨、左肩胛骨、右肩胛骨、胸骨、脊椎骨区域及个别脊椎骨。
99.根据权利要求59至98中任一权利要求所述的***,其中所述目标组织区域中的一或多者包括一或多个选自由以下组成的群组的软组织区域:左肾上腺、右肾上腺、主动脉、大脑、左支气管、右支气管、胆囊、左臀大肌、右臀大肌、心脏、左髂总动脉、右髂总动脉、左肾脏、右肾脏、肝脏、左肺、右肺、胰脏、***、直肠、脾、气管、膀胱、脑室及腮腺。
100.根据权利要求99所述的***,其中所述一或多个目标组织区域包括一或多个选自由以下组成的群组的软组织区域:胆囊、左肾脏、右肾脏、肝脏、左肺、右肺、***及膀胱。
101.根据权利要求59至100中任一权利要求所述的***,其中所述目标组织区域包括一或多个各自对应于特定骨的骨区域。
102.一种用于自动处理3D图像以自动鉴别个体内的癌病变的***,所述***包括:
计算装置的处理器;及
在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:
(a)接收使用解剖成像模式所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织的图形表示;
(b)针对多个目标组织区域中的每一者,使用一或多个机器学习模块自动鉴别所述3D解剖图像内的对应目标所关注体积(VOI);
(c)测定表示多个3D分段掩模的3D分段图,各3D分段掩模表示特定鉴别的目标VOI;
(d)接收使用功能成像模式所获得的所述个体的3D功能图像;
(e)使用所述3D分段图在所述3D功能图像内鉴别一或多个3D体积,其各自对应于所鉴别的目标VOI;及
(f)在所述3D功能图像内所鉴别的所述一或多个3D体积的至少一部分内自动检测一或多个热点,所述热点基于所述3D功能图像内的立体像素强度经测定以表示病变。
103.根据权利要求102所述的***,其中所述指令使所述处理器使用所述一或多个经检测热点来确定所述个体的癌症状态。
104.根据权利要求102或103所述的***,其中所述目标组织区域包括一或多个参考组织区域且其中所述指令使所述处理器:
使用所述3D分段图以在所述3D功能图像内鉴别一或多个3D参考体积,其各自对应于特定参考组织区域;
测定一或多个参考强度值,其各自与所述一或多个3D参考体积的特定3D参考体积相关且对应于所述特定3D参考体积内的强度测量值;
测定一或多个个别热点强度值,其各自与经检测的一或多个热点的至少一部分中的特定热点相关且对应于所述特定热点的强度测量值;及
使用所述一或多个个别热点强度值及所述一或多个参考强度值测定一或多个个别热点指标值。
105.根据权利要求104所述的***,其中所述参考组织区域包括一或多个选自由以下组成的群组的成员:肝脏、主动脉及腮腺。
106.根据权利要求103至105中任一权利要求所述的***,其中所述指令使所述处理器使用所述一或多个热点指标值的至少一部分测定指示所述个体的癌症状态的总体指标值。
107.根据权利要求106所述的***,其中所述总体指标值经测定为所述个别热点指标值的至少一部分的加权和。
108.根据权利要求102至107中任一权利要求所述的***,其中:
所述3D解剖图像为x射线计算机断层摄影术(CT)图像,且
所述3D功能图像为3D正电子发射断层摄影术(PET)图像。
109.根据权利要求108所述的***,其中在向所述个体投予包括***特异性膜抗原(PSMA)结合剂的放射性药品后,获得所述个体的所述3D PET图像。
110.根据权利要求109所述的***,其中所述放射性药品包括[18F]DCFPyL。
111.一种用于自动处理3D图像以鉴别及测量放射性药品在患有癌症或处于其风险下的个体内的癌病变中的吸收的***,所述***包括:
计算装置的处理器;及
在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:
(a)接收使用解剖成像模式所获得的个体的3D解剖图像,其中所述3D解剖图像包括所述个体内的组织的图形表示;
(b)使用一或多个机器学习模块在所述3D解剖图像内自动鉴别:
第一骨骼体积,其包括所述个体的一或多个骨的图形表示;
第一主动脉体积,其包括所述个体的主动脉的至少一部分的图形表示;及
第一肝脏体积,其包括所述个体的肝脏的图形表示;
(c)测定表示多个3D分段掩模的3D分段图,所述3D分段掩模包含表示经鉴别的第一骨骼体积的骨骼掩模、表示经鉴别的第一主动脉体积的主动脉掩模及表示经鉴别的第一肝脏体积的肝脏掩模;
(d)接收使用功能成像模式所获得的所述个体的3D功能图像;
(e)使用所述3D分段图在所述3D功能图像内自动鉴别:
第二骨骼体积,其对应于所述3D解剖图像内的所述第一鉴别骨骼体积;
第二主动脉体积,其对应于所述3D解剖图像内所鉴别的所述第一主动脉体积;及
第二肝脏体积,其对应于所述3D解剖图像内所鉴别的所述第一肝脏体积;
(f)在所述第二骨骼体积内自动检测一或多个热点,所述热点基于所述第二骨骼体积内的立体像素强度经测定以表示病变;及
(g)针对所述一或多个经检测热点中的每一者,通过以下方式来测定个别热点指标值:
基于所述第二主动脉体积内的立体像素的强度测量值测定主动脉参考强度水平;
基于所述第二肝脏体积内的立体像素的强度测量值测定肝脏参考强度水平;及
针对各个别经检测热点:
基于经检测热点的立体像素的强度测量值测定对应个别热点强度水平;及
根据所述个别热点强度水平、所述主动脉参考强度水平及所述肝脏参考强度水平测定对应个别热点指标水平。
112.根据权利要求111所述的***,其中所述指令使所述处理器基于所述一或多个经检测热点的至少一部分的所述个别热点指标值测定指示所述个体的癌症状态的总体指标值。
113.根据权利要求111或112所述的***,其中所述个体患有***癌或处于其风险下。
114.根据权利要求111至113中任一权利要求所述的***,其中所述指令使所述处理器:
在步骤(b)处,在所述3D解剖图像内自动鉴别包括所述个体的***的图形表示的第一***体积;
在步骤(c)处,包含表示经测定3D分段图中的经鉴别的第一***体积的***掩模;
在步骤(e)处,在所述3D功能图像内自动鉴别对应于所述3D解剖图像内的所述第一鉴别***体积的第二***体积,
在步骤(f)处,自动检测所述第二***体积中的一或多个热点;及
(i)基于位于所述第二骨骼体积中的所述一或多个经检测热点的至少一部分的所述个别热点指标值测定指示所述个体的所述一或多个骨中的病变含量的总体骨指标值;及(ii)基于位于所述第二***体积中的所述一或多个经检测热点的至少一部分的所述个别热点指标值测定指示所述个体的所述***中的病变含量的总体***指标值。
115.根据权利要求111至114中任一权利要求所述的***,其中所述个体患有转移癌或处于其风险下。
116.一种用于自动处理不同大小的全身3D解剖图像集合以在各3D解剖图像内自动鉴别对应于特定目标组织区域的多个3D体积的***,所述***包括:
计算装置的处理器;及
在其上存储有指令的存储器,其中所述指令当由所述处理器执行时,使所述处理器:
(a)接收使用解剖成像模式所获得的一或多个个体的所述3D解剖图像集合,其中所述3D解剖图像包括所述一或多个个体中的每一者内的组织的图形表示,其中所述3D解剖图像集合具有平均x维、平均y维及平均z维,其中的至少一者具有对应平均值的至少3%的标准差;及
(b)使用实施CNN的定位模块在所述3D解剖图像集合的各图像内自动测定对应于特定解剖区域的至少一个初始VOI,所述特定解剖区域包括一或多个特定相关目标组织区域,借此鉴别对应3D解剖图像的至少一个初始VOI;及
(c)针对各初始VOI,使用针对与所述初始VOI对应的所述特定解剖区域相关的所述一或多个特定目标组织区域中的每一者各自实施CNN的一或多个分段模块来自动鉴别对应目标VOI。
CN202080008220.2A 2019-01-07 2020-01-06 用于平台中立性全身图像分段的***及方法 Pending CN113272859A (zh)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
US201962789155P 2019-01-07 2019-01-07
US62/789,155 2019-01-07
US201962837941P 2019-04-24 2019-04-24
US62/837,941 2019-04-24
US201962863608P 2019-06-19 2019-06-19
US62/863,608 2019-06-19
US201962870210P 2019-07-03 2019-07-03
US62/870,210 2019-07-03
US201962907158P 2019-09-27 2019-09-27
US62/907,158 2019-09-27
US201962934305P 2019-11-12 2019-11-12
US62/934,305 2019-11-12
PCT/EP2020/050132 WO2020144134A1 (en) 2019-01-07 2020-01-06 Systems and methods for platform agnostic whole body image segmentation

Publications (1)

Publication Number Publication Date
CN113272859A true CN113272859A (zh) 2021-08-17

Family

ID=69326479

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080008220.2A Pending CN113272859A (zh) 2019-01-07 2020-01-06 用于平台中立性全身图像分段的***及方法

Country Status (8)

Country Link
US (3) US11657508B2 (zh)
EP (1) EP3909014A1 (zh)
JP (2) JP2022516316A (zh)
CN (1) CN113272859A (zh)
AU (1) AU2020206584A1 (zh)
CA (1) CA3122540A1 (zh)
TW (1) TW202040518A (zh)
WO (1) WO2020144134A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114067361A (zh) * 2021-11-16 2022-02-18 西北民族大学 一种spect成像的非病变热区切分方法与***
KR102598233B1 (ko) * 2022-06-07 2023-11-07 충북대학교병원 의료 영상을 대상으로 하는 딥러닝 기반의 의료정보 제공시스템 및 방법

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2017348111B2 (en) 2016-10-27 2023-04-06 Progenics Pharmaceuticals, Inc. Network for medical image analysis, decision support system, and related graphical user interface (GUI) applications
EP3646240A4 (en) * 2017-06-26 2021-03-17 The Research Foundation for The State University of New York SYSTEM, PROCEDURE AND COMPUTER-ACCESSIBLE MEDIUM FOR VIRTUAL PANCREATOGRAPHY
US10973486B2 (en) 2018-01-08 2021-04-13 Progenics Pharmaceuticals, Inc. Systems and methods for rapid neural network-based image segmentation and radiopharmaceutical uptake determination
AU2020206584A1 (en) 2019-01-07 2021-06-17 Exini Diagnostics Ab Systems and methods for platform agnostic whole body image segmentation
US11948283B2 (en) 2019-04-24 2024-04-02 Progenics Pharmaceuticals, Inc. Systems and methods for interactive adjustment of intensity windowing in nuclear medicine images
CN113710159A (zh) 2019-04-24 2021-11-26 普罗热尼奇制药公司 用于对骨扫描图像进行自动化及交互式分析以检测转移的***及方法
US11263497B2 (en) * 2019-06-21 2022-03-01 StraxCorp Pty. Ltd. Method and system for machine learning classification based on structure or material segmentation in an image
US11308623B2 (en) * 2019-07-09 2022-04-19 The Johns Hopkins University System and method for multi-scale coarse-to-fine segmentation of images to detect pancreatic ductal adenocarcinoma
US11900597B2 (en) 2019-09-27 2024-02-13 Progenics Pharmaceuticals, Inc. Systems and methods for artificial intelligence-based image analysis for cancer assessment
US11544407B1 (en) 2019-09-27 2023-01-03 Progenics Pharmaceuticals, Inc. Systems and methods for secure cloud-based medical image upload and processing
US11564621B2 (en) 2019-09-27 2023-01-31 Progenies Pharmacenticals, Inc. Systems and methods for artificial intelligence-based image analysis for cancer assessment
US11545266B2 (en) * 2019-09-30 2023-01-03 GE Precision Healthcare LLC Medical imaging stroke model
US11521314B2 (en) * 2019-12-31 2022-12-06 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for image processing
US11386988B2 (en) 2020-04-23 2022-07-12 Exini Diagnostics Ab Systems and methods for deep-learning-based segmentation of composite images
US11321844B2 (en) 2020-04-23 2022-05-03 Exini Diagnostics Ab Systems and methods for deep-learning-based segmentation of composite images
US11721428B2 (en) 2020-07-06 2023-08-08 Exini Diagnostics Ab Systems and methods for artificial intelligence-based image analysis for detection and characterization of lesions
EP4176377A1 (en) 2020-07-06 2023-05-10 Exini Diagnostics AB Systems and methods for artificial intelligence-based image analysis for detection and characterization of lesions
US11925331B2 (en) * 2020-07-13 2024-03-12 Charles T. Gonsowski Camera accessory device for a laryngoscope and an artificial intelligence and pattern recognition system using the collected images
US11688063B2 (en) 2020-10-30 2023-06-27 Guerbet Ensemble machine learning model architecture for lesion detection
US11436724B2 (en) * 2020-10-30 2022-09-06 International Business Machines Corporation Lesion detection artificial intelligence pipeline computing system
US11694329B2 (en) 2020-10-30 2023-07-04 International Business Machines Corporation Logistic model to determine 3D z-wise lesion connectivity
US11749401B2 (en) 2020-10-30 2023-09-05 Guerbet Seed relabeling for seed-based segmentation of a medical image
US11587236B2 (en) 2020-10-30 2023-02-21 International Business Machines Corporation Refining lesion contours with combined active contour and inpainting
US11688517B2 (en) 2020-10-30 2023-06-27 Guerbet Multiple operating point false positive removal for lesion identification
KR102283673B1 (ko) * 2020-11-30 2021-08-03 주식회사 코어라인소프트 병변 추적 검사에 기반하여 진단 보조 정보의 임계치를 조정하는 의료 영상 판독 지원 장치 및 방법
WO2022129628A1 (en) * 2020-12-18 2022-06-23 Radiobotics Aps Computer-implemented method for image analysis of medical images by neural network supported region-of-interest segmentation
CN112991276B (zh) * 2021-02-25 2024-05-14 复旦大学附属中山医院 基于多核素pet影像不同特征对比减影及量化分析方法
CN112991478B (zh) * 2021-02-25 2024-02-02 复旦大学附属中山医院 基于深度学习的影像分析多时相异常特征区域参数的方法
CA3211137A1 (en) * 2021-02-26 2022-09-01 Reflexion Medical, Inc. Methods for automatic target identification, tracking, and safety evaluation for radiotherapy
CN117242362A (zh) 2021-05-07 2023-12-15 拜耳公司 使用动态对比度增强的磁共振断层扫描表征肝脏病变
WO2022251451A1 (en) * 2021-05-27 2022-12-01 The Research Foundation For The State University Of New York Methods, systems, and program products for manipulating magnetic resonance imaging (mri) images
CN113344926B (zh) * 2021-08-05 2021-11-02 武汉楚精灵医疗科技有限公司 胆胰超声图像识别方法、装置、服务器及存储介质
TW202324443A (zh) * 2021-10-08 2023-06-16 瑞典商艾西尼診斷公司 用於自動鑑別及分類局部淋巴及遠處轉移中之病變的系統和方法
US20230127380A1 (en) * 2021-10-21 2023-04-27 GE Precision Healthcare LLC Methods and systems for colorizing medical images
US20230126453A1 (en) * 2021-10-22 2023-04-27 Blue Earth Diagnostics Limited Imaging of brain lesions
US11423853B1 (en) 2021-11-29 2022-08-23 Unity Technologies Sf Increasing resolution and luminance of a display
WO2023097391A1 (en) * 2021-11-30 2023-06-08 Pulsemedica Corp. System and method for detection of floaters
EP4202827A1 (en) * 2021-12-21 2023-06-28 Koninklijke Philips N.V. System and method for classifying lesions
WO2023117740A1 (en) 2021-12-21 2023-06-29 Koninklijke Philips N.V. System and method for classifying lesions
WO2023170292A1 (en) * 2022-03-11 2023-09-14 Caerus Medical Method for aiding the diagnose of spine conditions
WO2023212745A2 (en) * 2022-04-30 2023-11-02 The General Hospital Corporation System for and method of zinc imaging for margin assessment during breast conserving surgery
WO2023232067A1 (en) * 2022-05-31 2023-12-07 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for lesion region identification
WO2023239829A2 (en) * 2022-06-08 2023-12-14 Progenics Pharmaceuticals, Inc. Systems and methods for assessing disease burden and progression
CN115147378B (zh) * 2022-07-05 2023-07-25 哈尔滨医科大学 一种ct图像分析提取方法
CN115619810B (zh) * 2022-12-19 2023-10-03 中国医学科学院北京协和医院 一种***分区分割方法、***及设备
CN117576124B (zh) * 2024-01-15 2024-04-30 福建智康云医疗科技有限公司 一种基于人工智能的腹部ct图像肝脏分割方法及***

Family Cites Families (106)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5165410A (en) 1987-05-15 1992-11-24 Medical & Scientific Enterprises, Inc. Position indicating system for a multidiagnostic scanner
CN1111823C (zh) 1997-05-27 2003-06-18 力捷电脑股份有限公司 使用分段加权校正的影像处理装置及其处理方法
US6058322A (en) 1997-07-25 2000-05-02 Arch Development Corporation Methods for improving the accuracy in differential diagnosis on radiologic examinations
US6996261B2 (en) 2001-01-30 2006-02-07 Decharms R Christopher Methods for physiological monitoring, training, exercise and regulation
US7295691B2 (en) 2002-05-15 2007-11-13 Ge Medical Systems Global Technology Company, Llc Computer aided diagnosis of an image set
US7450747B2 (en) 2002-07-12 2008-11-11 Ge Medical Systems Global Technology Company, Llc System and method for efficiently customizing an imaging system
SE524500C2 (sv) 2002-09-16 2004-08-17 Weaidu In Europ Ab Förfarande och anordning för bestämning av en tredimensionell kontur av ett organ i en patients kropp
EP1508872A1 (en) 2003-08-22 2005-02-23 Semeion An algorithm for recognising relationships between data of a database and a method for image pattern recognition based on the said algorithm
US7935055B2 (en) 2003-09-19 2011-05-03 Siemens Medical Solutions Usa, Inc. System and method of measuring disease severity of a patient before, during and after treatment
DE10356272B4 (de) 2003-11-28 2006-02-23 Siemens Ag Verfahren zur Navigation in 3-dimensionalen Bilddaten
US20090311182A1 (en) 2004-03-31 2009-12-17 Dong Wang Macromolecular Delivery Systems for Non-Invasive Imaging, Evaluation and Treatment of Arthritis and Other Inflammatory Diseases
WO2005106474A2 (en) 2004-04-14 2005-11-10 Edda Technology, Inc. Liver disease diagnosis system, method and graphical user interface
DE102004027710A1 (de) 2004-06-07 2006-01-26 Siemens Ag Verfahren zur automatischen Detektion einer Struktur bei bildgebenden medizinischen Verfahren, Computertomografiegerät, Arbeitsstation und Comupterprogrammprodukt
US7397475B2 (en) 2004-09-02 2008-07-08 Siemens Medical Solutions Usa, Inc. Interactive atlas extracted from volume data
US20140193336A1 (en) 2005-07-19 2014-07-10 Biosensors International Group, Ltd. Imaging protocols
US7668342B2 (en) 2005-09-09 2010-02-23 Carl Zeiss Meditec, Inc. Method of bioimage data processing for revealing more meaningful anatomic features of diseased tissues
US7876938B2 (en) 2005-10-06 2011-01-25 Siemens Medical Solutions Usa, Inc. System and method for whole body landmark detection, segmentation and change quantification in digital images
US7920730B2 (en) 2005-10-07 2011-04-05 Siemens Medical Solutions Usa, Inc. Automatic bone detection in MRI images
DE102005048853A1 (de) 2005-10-12 2007-04-26 Siemens Ag Bildgebende medizinische Modalität
WO2007062135A2 (en) 2005-11-23 2007-05-31 Junji Shiraishi Computer-aided method for detection of interval changes in successive whole-body bone scans and related computer program product and system
DE102005059209B4 (de) 2005-12-12 2010-11-25 Siemens Ag Verfahren und Vorrichtung zur Visualisierung einer Folge von tomographischen Bilddatensätzen
WO2007110420A2 (en) 2006-03-24 2007-10-04 Exini Diagnostics Ab Automatic interpretation of 3-d medicine images of the brain and methods for producing intermediate results
JP5127276B2 (ja) 2006-05-26 2013-01-23 株式会社東芝 画像処理装置および磁気共鳴イメージング装置
US20080027315A1 (en) 2006-07-31 2008-01-31 Icad, Inc. Processing and presentation of electronic subtraction for tagged colonic fluid and rectal tube in computed colonography
US20100215581A1 (en) 2006-10-25 2010-08-26 Koninklijke Philips Electronics N.V. Contrast agents for detecting prostate cancer
WO2008062407A2 (en) 2006-11-21 2008-05-29 Mantisvision Ltd. 3d geometric modeling and 3d video content creation
USRE47609E1 (en) 2007-12-28 2019-09-17 Exini Diagnostics Ab System for detecting bone cancer metastases
GB0803064D0 (en) 2008-02-20 2008-03-26 Siemens Medical Solutions System for defining volumes of interest with reference to anatomical features
US20090309874A1 (en) 2008-06-11 2009-12-17 Siemens Medical Solutions Usa, Inc. Method for Display of Pre-Rendered Computer Aided Diagnosis Results
JP2010029481A (ja) 2008-07-29 2010-02-12 Univ Of Tsukuba 腫瘍の経過観察レポート自動作成診断支援システム
CA2987744C (en) 2008-08-01 2022-11-15 The Johns Hopkins University Psma-binding agents and uses thereof
US8705887B2 (en) 2008-08-22 2014-04-22 Weyerhaeuser Nr Company Method and apparatus for filling in or replacing image pixel data
WO2010065899A2 (en) 2008-12-05 2010-06-10 Molecular Insight Pharmaceuticals, Inc. Technetium-and rhenium-bis(heteroaryl)complexes and methods of use thereof
AU2009322167B2 (en) 2008-12-05 2014-11-20 Molecular Insight Pharmaceuticals, Inc. Technetium- and rhenium-bis(heteroaryl) complexes and methods of use thereof for inhibiting PSMA
WO2010109350A2 (en) 2009-03-26 2010-09-30 Koninklijke Philips Electronics N.V. Pet/ct based therapy monitoring system supported by a clinical guideline navigator
US8073220B2 (en) 2009-04-20 2011-12-06 Siemens Aktiengesellschaft Methods and systems for fully automatic segmentation of medical images
US8588486B2 (en) 2009-06-18 2013-11-19 General Electric Company Apparatus and method for isolating a region in an image
US8467856B2 (en) 2009-07-17 2013-06-18 Koninklijke Philips Electronics N.V. Anatomy modeling for tumor region of interest definition
JP2011067594A (ja) 2009-08-25 2011-04-07 Fujifilm Corp 肝機能造影像を用いた医用画像診断装置および方法、並びにプログラム
US20110063288A1 (en) 2009-09-11 2011-03-17 Siemens Medical Solutions Usa, Inc. Transfer function for volume rendering
WO2011077303A1 (en) 2009-12-23 2011-06-30 Koninklijke Philips Electronics N.V. Methods and apparatuses for prostate cancer detection, staging, and therapy response assessment
CN102947840A (zh) 2010-01-22 2013-02-27 纽约州立大学研究基金会 ***可视化和癌症检测的***和方法
EP2533816A1 (en) 2010-02-08 2012-12-19 Piramal Imaging SA F18-tyrosine derivatives for imaging bone metastases
US9401047B2 (en) 2010-04-15 2016-07-26 Siemens Medical Solutions, Usa, Inc. Enhanced visualization of medical image data
WO2012168813A1 (en) 2011-06-10 2012-12-13 Koninklijke Philips Electronics N.V. Dose-optimized protocol for ac and localization on hybrid scanners
US9123155B2 (en) 2011-08-09 2015-09-01 Covidien Lp Apparatus and method for using augmented reality vision system in surgical procedures
US9002081B2 (en) 2011-10-18 2015-04-07 Matthew Sherman Brown Computer-aided bone scan assessment with automated lesion detection and quantitative assessment of bone disease burden changes
WO2013078370A1 (en) 2011-11-23 2013-05-30 The Regents Of The University Of Michigan Voxel-based approach for disease detection and evolution
US8682049B2 (en) 2012-02-14 2014-03-25 Terarecon, Inc. Cloud-based medical image processing system with access control
US20130211231A1 (en) 2012-02-14 2013-08-15 Manivannan Sundarapandian Method and system for visualization of treatment volumes
JP6501524B2 (ja) 2012-02-24 2019-04-17 コーネル ユニヴァーシティー Psma上昇により致死性前立腺癌が同定される
EP3647822A3 (en) 2012-05-08 2020-08-12 Spectrum Dynamics Medical Limited Nuclear medicine tomography systems, detectors and methods
JP6170284B2 (ja) 2012-06-22 2017-07-26 富士フイルムRiファーマ株式会社 画像処理プログラム、記録媒体、画像処理装置、及び画像処理方法
JP6013042B2 (ja) 2012-06-27 2016-10-25 富士フイルムRiファーマ株式会社 画像処理プログラム、記録媒体、画像処理装置、及び画像処理方法
US9721340B2 (en) 2013-08-13 2017-08-01 H. Lee Moffitt Cancer Center And Research Institute, Inc. Systems, methods and devices for analyzing quantitative information obtained from radiological images
WO2015058151A2 (en) 2013-10-18 2015-04-23 Molecular Insight Pharmaceuticals, Inc. Methods of using spect/ct analysis for staging cancer
US20150331995A1 (en) 2014-05-14 2015-11-19 Tiecheng Zhao Evolving contextual clinical data engine for medical data processing
WO2015176011A1 (en) 2014-05-15 2015-11-19 The Johns Hopkins University Method, system and computer-readable media for treatment plan risk analysis
GB2528249B (en) 2014-07-11 2019-03-06 Siemens Medical Solutions Usa Inc Automatic background region selection for lesion delineation in medical images
US10061003B2 (en) 2014-09-01 2018-08-28 bioProtonics, L.L.C. Selective sampling for assessing structural spatial frequencies with specific contrast mechanisms
EP3043318B1 (en) 2015-01-08 2019-03-13 Imbio Analysis of medical images and creation of a report
JP6545591B2 (ja) 2015-09-28 2019-07-17 富士フイルム富山化学株式会社 診断支援装置、方法及びコンピュータプログラム
US10058393B2 (en) 2015-10-21 2018-08-28 P Tech, Llc Systems and methods for navigation and visualization
WO2017091833A1 (en) 2015-11-29 2017-06-01 Arterys Inc. Automated cardiac volume segmentation
WO2017103037A1 (en) 2015-12-17 2017-06-22 Koninklijke Philips N.V. Method and device for a medical image analysis
US10810740B2 (en) 2016-07-20 2020-10-20 Tel Hashomer Medical Research Infrastructure And Services Ltd. System and method for automated characterization of solid tumors using medical imaging
US10210634B2 (en) 2016-07-20 2019-02-19 Shanghai United Imaging Healthcare Co., Ltd. System and method for segmenting medical image
CN106558045B (zh) 2016-10-20 2019-07-19 上海联影医疗科技有限公司 一种肺组织分割方法、装置,医学图像处理***
AU2017348111B2 (en) 2016-10-27 2023-04-06 Progenics Pharmaceuticals, Inc. Network for medical image analysis, decision support system, and related graphical user interface (GUI) applications
US10902598B2 (en) 2017-01-27 2021-01-26 Arterys Inc. Automated segmentation utilizing fully convolutional networks
US10492723B2 (en) 2017-02-27 2019-12-03 Case Western Reserve University Predicting immunotherapy response in non-small cell lung cancer patients with quantitative vessel tortuosity
KR101754291B1 (ko) 2017-04-04 2017-07-06 이현섭 개인 맞춤형 뇌질병 진단 및 상태 판정을 위한 의료 영상 처리 시스템 및 방법
GB201705876D0 (en) 2017-04-11 2017-05-24 Kheiron Medical Tech Ltd Recist
US10140421B1 (en) 2017-05-25 2018-11-27 Enlitic, Inc. Medical scan annotator system
US20200085382A1 (en) 2017-05-30 2020-03-19 Arterys Inc. Automated lesion detection, segmentation, and longitudinal identification
EP3646240A4 (en) 2017-06-26 2021-03-17 The Research Foundation for The State University of New York SYSTEM, PROCEDURE AND COMPUTER-ACCESSIBLE MEDIUM FOR VIRTUAL PANCREATOGRAPHY
EP3437559B1 (de) 2017-08-03 2020-06-24 Siemens Healthcare GmbH Ermitteln eines funktionsparameters betreffend eine lokale gewebefunktion für mehrere gewebebereiche
EP3470006B1 (en) 2017-10-10 2020-06-10 Holo Surgical Inc. Automated segmentation of three dimensional bony structure images
US10223610B1 (en) 2017-10-15 2019-03-05 International Business Machines Corporation System and method for detection and classification of findings in images
WO2019103912A2 (en) 2017-11-22 2019-05-31 Arterys Inc. Content based image retrieval for lesion analysis
TWI835768B (zh) 2018-01-08 2024-03-21 美商普吉尼製藥公司 用於基於神經網路之快速影像分段及放射性藥品之攝取的測定之系統及方法
US10973486B2 (en) 2018-01-08 2021-04-13 Progenics Pharmaceuticals, Inc. Systems and methods for rapid neural network-based image segmentation and radiopharmaceutical uptake determination
US20200342600A1 (en) 2018-01-08 2020-10-29 Progenics Pharmaceuticals, Inc. Systems and methods for rapid neural network-based image segmentation and radiopharmaceutical uptake determination
EP3514756A1 (en) 2018-01-18 2019-07-24 Koninklijke Philips N.V. Medical analysis method for predicting metastases in a test tissue sample
EP3765097B1 (en) 2018-03-16 2022-04-27 Universität zu Köln 2-alkoxy-6-[18f]fluoronicotinoyl substituted lys-c(o)-glu derivatives as efficient probes for imaging of psma expressing tissues
US11026649B2 (en) 2018-06-25 2021-06-08 Siemens Medical Solutions Usa, Inc. Method and system for determining tumor burden in medical images
US10902588B2 (en) 2018-08-13 2021-01-26 International Business Machines Corporation Anatomical segmentation identifying modes and viewpoints with deep learning across modalities
US11282198B2 (en) 2018-11-21 2022-03-22 Enlitic, Inc. Heat map generating system and methods for use therewith
US11145059B2 (en) 2018-11-21 2021-10-12 Enlitic, Inc. Medical scan viewing system with enhanced training and methods for use therewith
US10818386B2 (en) 2018-11-21 2020-10-27 Enlitic, Inc. Multi-label heat map generating system
US11457871B2 (en) 2018-11-21 2022-10-04 Enlitic, Inc. Medical scan artifact detection system and methods for use therewith
US20200170604A1 (en) 2018-12-04 2020-06-04 Howmedica Osteonics Corp. CT Based Probabilistic Cancerous Bone Region Detection
US11514571B2 (en) 2018-12-17 2022-11-29 Siemens Healthcare Gmbh Hierarchical analysis of medical images for identifying and assessing lymph nodes
WO2020146032A1 (en) 2019-01-07 2020-07-16 Siemens Medical Solutions Usa, Inc. Determination of metabolic rate from static pet scan
AU2020206584A1 (en) 2019-01-07 2021-06-17 Exini Diagnostics Ab Systems and methods for platform agnostic whole body image segmentation
EP3939002A1 (en) 2019-03-15 2022-01-19 Genentech, Inc. Deep convolutional neural networks for tumor segmentation with positron emission tomography
EP3664034B1 (en) 2019-03-26 2021-09-01 Siemens Healthcare GmbH Method and data processing system for providing lymph node information
CN113710159A (zh) 2019-04-24 2021-11-26 普罗热尼奇制药公司 用于对骨扫描图像进行自动化及交互式分析以检测转移的***及方法
US11948283B2 (en) 2019-04-24 2024-04-02 Progenics Pharmaceuticals, Inc. Systems and methods for interactive adjustment of intensity windowing in nuclear medicine images
US11564621B2 (en) 2019-09-27 2023-01-31 Progenies Pharmacenticals, Inc. Systems and methods for artificial intelligence-based image analysis for cancer assessment
US11900597B2 (en) 2019-09-27 2024-02-13 Progenics Pharmaceuticals, Inc. Systems and methods for artificial intelligence-based image analysis for cancer assessment
US11321844B2 (en) 2020-04-23 2022-05-03 Exini Diagnostics Ab Systems and methods for deep-learning-based segmentation of composite images
US11386988B2 (en) 2020-04-23 2022-07-12 Exini Diagnostics Ab Systems and methods for deep-learning-based segmentation of composite images
US11721428B2 (en) 2020-07-06 2023-08-08 Exini Diagnostics Ab Systems and methods for artificial intelligence-based image analysis for detection and characterization of lesions
EP4176377A1 (en) 2020-07-06 2023-05-10 Exini Diagnostics AB Systems and methods for artificial intelligence-based image analysis for detection and characterization of lesions
TW202324443A (zh) 2021-10-08 2023-06-16 瑞典商艾西尼診斷公司 用於自動鑑別及分類局部淋巴及遠處轉移中之病變的系統和方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114067361A (zh) * 2021-11-16 2022-02-18 西北民族大学 一种spect成像的非病变热区切分方法与***
CN114067361B (zh) * 2021-11-16 2022-08-23 西北民族大学 一种spect成像的非病变热区切分方法与***
KR102598233B1 (ko) * 2022-06-07 2023-11-07 충북대학교병원 의료 영상을 대상으로 하는 딥러닝 기반의 의료정보 제공시스템 및 방법

Also Published As

Publication number Publication date
US11657508B2 (en) 2023-05-23
US20230316530A1 (en) 2023-10-05
TW202040518A (zh) 2020-11-01
US20240169546A1 (en) 2024-05-23
WO2020144134A1 (en) 2020-07-16
JP2022516316A (ja) 2022-02-25
CA3122540A1 (en) 2020-07-16
JP2024079801A (ja) 2024-06-11
US20200245960A1 (en) 2020-08-06
US11941817B2 (en) 2024-03-26
EP3909014A1 (en) 2021-11-17
AU2020206584A1 (en) 2021-06-17

Similar Documents

Publication Publication Date Title
US11941817B2 (en) Systems and methods for platform agnostic whole body image segmentation
TWI835768B (zh) 用於基於神經網路之快速影像分段及放射性藥品之攝取的測定之系統及方法
US11937962B2 (en) Systems and methods for automated and interactive analysis of bone scan images for detection of metastases
US11321844B2 (en) Systems and methods for deep-learning-based segmentation of composite images
US11386988B2 (en) Systems and methods for deep-learning-based segmentation of composite images
US11721428B2 (en) Systems and methods for artificial intelligence-based image analysis for detection and characterization of lesions
TW202207241A (zh) 用於偵測及表徵化病變之基於人工智慧的影像分析系統與方法
US20230115732A1 (en) Systems and methods for automated identification and classification of lesions in local lymph and distant metastases
US20230351586A1 (en) Systems and methods for artificial intelligence-based image analysis for detection and characterization of lesions
US20230410985A1 (en) Systems and methods for assessing disease burden and progression
TW202414429A (zh) 評估疾病負荷及進展之系統及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination