CN111325077B - 一种图像显示方法、装置、设备及计算机存储介质 - Google Patents

一种图像显示方法、装置、设备及计算机存储介质 Download PDF

Info

Publication number
CN111325077B
CN111325077B CN201811544361.7A CN201811544361A CN111325077B CN 111325077 B CN111325077 B CN 111325077B CN 201811544361 A CN201811544361 A CN 201811544361A CN 111325077 B CN111325077 B CN 111325077B
Authority
CN
China
Prior art keywords
images
image
target
target object
positions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811544361.7A
Other languages
English (en)
Other versions
CN111325077A (zh
Inventor
张丽
孙运达
赵眺
金鑫
沈乐
陈志强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Nuctech Co Ltd
Original Assignee
Tsinghua University
Nuctech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University, Nuctech Co Ltd filed Critical Tsinghua University
Priority to CN201811544361.7A priority Critical patent/CN111325077B/zh
Priority to EP19898062.5A priority patent/EP3901815A4/en
Priority to PCT/CN2019/105155 priority patent/WO2020125081A1/zh
Publication of CN111325077A publication Critical patent/CN111325077A/zh
Application granted granted Critical
Publication of CN111325077B publication Critical patent/CN111325077B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5223Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data generating planar views from image data, e.g. extracting a coronal view from a 3D image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/008Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/04Context-preserving transformations, e.g. by using an importance map
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/05Recognition of patterns representing particular kinds of hidden objects, e.g. weapons, explosives, drugs
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Optics & Photonics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Pathology (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种图像显示方法、装置、设备及计算机存储介质。图像显示方法包括:确定目标对象在多个第一图像中的对象位置;根据对象位置和目标位置处理多个第一图像,并生成与多个第一图像一一对应的多个第二图像,其中,目标对象分别位于第二图像中的目标位置,目标位置为多个第二图像中的同一位置;显示多个第二图像。根据本发明实施例,能够在显示图像时,将目标对象始终显示在目标位置,从而方便用户对目标对象进行查看。

Description

一种图像显示方法、装置、设备及计算机存储介质
技术领域
本发明属于图像显示技术领域,尤其涉及一种图像显示方法、装置、设备及计算机存储介质。
背景技术
现有的辐射成像设备的采集图像通常采用轮播的方式来显示。例如,通过直接数字化X射线摄影***(Digital Radiography,DR)实现的DR图像、通过电子计算机断层扫描***(Computed Tomography)实现的CT图像,以及三维重建图像数据进行前向投影计算得到的图像(TSP图像)等,就是通过轮播的方式进行图像显示。
当利用轮播的方式显示图像时,可以通过拖动滚动条选择希望显示的图像。例如,当图像为DR图像或TSP图像时,滚动条代表依次排列的透视角度,用户可以持续地拖动滚动条以连续显示各个透视角度的图像。再例如,当图像为CT图像时,滚动条代表依次排列的断层位置,用户可以持续地拖动滚动条以连续显示各个断层位置的图像。
但是,利用上述的方法显示图像时,均以图像的尺寸中心为图像中心显示所有的图像。因此,用户感兴趣的被照物或者通过识别算法识别出的违禁品/嫌疑物区域会被显示在各个图像上的不同位置处,无法突出显示某一被照物或者违禁品/嫌疑物区域,从而造成用户观察的撕裂感。
发明内容
本发明实施例提供一种在图像显示方法、装置、设备及计算机存储介质,能够在显示图像时,将目标对象始终显示在目标位置,从而方便用户对目标对象进行查看。
一方面,本发明实施例提供一种图像显示方法,包括:
确定目标对象在多个第一图像中的对象位置;
根据对象位置和目标位置处理多个第一图像,并生成与多个第一图像一一对应的多个第二图像,其中,目标对象分别位于第二图像中的目标位置,目标位置为多个第二图像中的同一位置;
显示多个第二图像。
进一步地,确定目标对象在多个第一图像中的对象位置前,还包括:
获取包含目标对象的多个第三图像;
根据多个第三图像,确定多个第一图像。
优选地,当第二图像和第三图像分别为包括目标对象的各个方向的透视图像,或,第二图像和第三图像分别为包括目标对象的各个位置的截面图像时,根据多个第三图像,确定多个第一图像包括:
将多个第三图像作为多个第一图像。
优选地,当第三图像为包括目标图像的各个位置的截面图像,第二图像为包括目标图像的各个方向的透视图像时,根据多个第三图像,确定多个第一图像包括:
根据多个第三图像,生成包括目标对象的三维图像;
根据三维图像,获取多个第一图像。
进一步地,确定目标对象在多个第一图像中的对象位置包括:
确定目标对象的特征点或特征轴;
根据特征点或特征轴,确定目标对象在多个第一图像中的对象位置。
优选地,目标位置为:
根据对象位置确定的显示位置;
预先设置的在对象位置之外的显示位置。
进一步地,根据对象位置和目标位置处理多个第一图像,并生成与多个第一图像一一对应的多个第二图像包括:
获取多个第一图像的图像内容;
根据对象位置和目标位置,移动图像内容,使目标对象位于目标位置,并生成第二图像。
另一方面,本发明实施例提供了一种图像显示装置,装置包括:
位置确定单元,其配置为确定目标对象在多个第一图像中的对象位置;
图像生成单元,其配置为根据对象位置和目标位置处理多个第一图像,并生成与多个第一图像一一对应的多个第二图像,其中,目标对象分别位于第二图像中的目标位置,目标位置为多个第二图像中的同一位置;
显示控制单元,其配置为显示多个第二图像。
再一方面,本发明实施例提供了一种图像显示设备,设备包括:处理器以及存储有计算机程序指令的存储器;
处理器执行计算机程序指令时实现上述的图像显示方法。
再一方面,本发明实施例提供了一种计算机存储介质,计算机存储介质上存储有计算机程序指令,计算机程序指令被处理器执行时实现上述的图像显示方法。
本发明实施例的图像显示方法、装置、设备及计算机存储介质,能够判断用户关注的目标对象在多个待显示的第一图像中对应的对象位置,根据对象位置和目标位置对各个第一图像进行处理,并且生成与第一图像对应的第二图像,然后连续显示第二图像,以在显示第二图像时使目标对象始终位于目标位置上。因此,用户在连续查看第二图像时,其关注的目标对象可以始终位于多个第二图像中的同一固定的位置,无需用户在图像中寻找目标对象,提高了用户查看包含目标对象的图像以及目标对象的便利性,从而实现更高效的人机交互,避免图像上物体过多时,目标对象的显示位置不断移动,造成用户的人眼定位困难的问题。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单的介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例提供的图像显示方法的流程示意图;
图2是本发明另一个实施例提供的图像显示方法的流程示意图;
图3是图2中的步骤S220的一个示例的流程示意图;
图4是图1中的步骤S110的一个示例的流程示意图;
图5是图1中的步骤S120的一个示例的流程示意图;
图6a-c是第一实施例中第一图像的示意图;
图7a-c是第一实施例中第二图像的示意图;
图8是第二实施例中的三维图像的示意图;
图9是图8所示的三维图像的俯视投影图;
图10a-c是第二实施例中第一图像的示意图;
图11a-c是第二实施例中第二图像的示意图;
图12是本发明一个实施例提供的图像显示装置的结构示意图;
图13是本发明另一个实施例提供的图像显示装置的结构示意图;
图14是本发明实施例提供的图像显示设备的硬件结构示意图。
具体实施方式
下面将详细描述本发明的各个方面的特征和示例性实施例,为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及具体实施例,对本发明进行进一步详细描述。应理解,此处所描述的具体实施例仅被配置为解释本发明,并不被配置为限定本发明。对于本领域技术人员来说,本发明可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本发明的示例来提供对本发明更好的理解。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
为了解决现有技术问题,本发明实施例提供了一种图像显示方法、装置、设备及计算机存储介质。下面首先对本发明实施例所提供的图像显示方法进行介绍。
图1示出了本发明一个实施例提供的图像显示方法的流程示意图。如图1所示,本发明实施例的图像显示方法包括:
S110、确定目标对象在多个第一图像中的对象位置;
S120、根据对象位置和目标位置处理多个第一图像,并生成与多个第一图像一一对应的多个第二图像,其中,目标对象分别位于第二图像中的目标位置,目标位置为多个第二图像中的同一位置;
S130、显示多个第二图像。
在本发明实施例中,能够首先基于用户关注的目标对象,判断该目标对象在多个待显示的第一图像中对应的对象位置,然后根据目标对象在各个第一图像中的对象位置和期望将该目标对象显示的目标位置,对各个第一图像进行处理,并生成与各个第一图像分别一一对应的多个第二图像,从而可以在连续显示第二图像时使目标对象始终位于目标位置上。因此,用户在连续查看第二图像时,其关注的目标对象可以始终位于多个第二图像中的同一固定的位置,无需在图像中寻找目标对象,提高了用户查看图像以及目标对象的便利性。
图2示出了本发明另一个实施例提供的图像显示方法的流程示意图。如图2所示,在步骤S110、确定目标对象在多个第一图像中的对象位置之前,还包括:
S210、获取包含目标对象的多个第三图像;
S220、根据多个第三图像,确定多个第一图像。
在步骤S210中,可以通过辐射成像设备获取包含目标对象的多个第三图像。例如,可以通过DR***扫描包含有目标对象的待检测物,将扫描获得的关于该待检测物的DR图像作为第三图像。再例如,可以通过CT***扫描包含有目标对象的待检测物,将扫描获得的关于该待检测物的CT图像作为第三图像。
其中,待检测物可以由多个独立的物体构成,也可以仅有一个物体构成。
当待检测物由多个独立的物体构成时,目标对象可以是由用户在多个物体中选择的一个焦点物体或者焦点区域,目标对象也可以是由辐射成像设备识别出的一个焦点物体或者焦点区域,其中,焦点区域可以为包括一个或多个物体的部分或全部的区域。
当待检测物仅由一个物体构成,该物体由多个结构构成或该物体内包含有多个结构时,目标对象可以是用户选择的该物体中的一个焦点结构或焦点区域,目标对象也可以是由辐射成像设备识别出的一个焦点结构或焦点区域,其中,焦点区域可以为包括一个或多个结构的部分或全部的区域。
以利用辐射成像设备对待检测物进行安全检查为例,辐射成像设备中可能同时放置有多个包裹和/或物品,这些包裹和/或物品构成了被检测物。此时,目标对象可以为用户选择的或者由辐射成像设备识别出的疑似为违禁品或嫌疑物的包裹或物品,将该包裹或物品作为焦点物体。目标对象也可以为用户选择的或者由辐射成像设备识别出的包含有疑似为违禁品或嫌疑物的包裹或物品的区域,将该区域作为焦点区域。
继续以利用辐射成像设备对待检测物进行安全检查为例,辐射成像设备中仅放置有一个包裹,该包裹构成了被检测物,并且,该包裹的内部包含有多个物品。此时,目标对象可以为用户选择的或者由辐射成像设备识别出的疑似为违禁品或嫌疑物的物品,将该物品作为焦点物体。目标对象也可以为用户选择的或者由辐射成像设备识别出的包含有疑似为违禁品或嫌疑物的物品的区域,将该区域作为焦点区域。
需要说明的是,在实际应用中,可以根据实际情况确定是将焦点物体还是将焦点区域作为目标对象。
在本发明实施例中,第一图像、第二图像和第三图像至少可以为包括目标对象的各个方向的透视图像和包括目标对象的各个位置的截面图像中的一种。因此,根据第一图像、第二图像和第三图像所对应的内容不同,在步骤S220中,根据多个第三图像,确定多个第一图像的具体方法可以至少分为以下三种情况:
第一种情况
当第二图像和第三图像分别为包括目标对象的各个方向的透视图像时,步骤S220、根据多个第三图像,确定多个第一图像包括:
将多个第三图像作为多个第一图像。
在这种情况下,由于第一图像、第二图像和第三图像均为包括目标对象的各个方向的透视图像,因此,可以直接将第三图像作为第一图像进行后续处理。例如,由辐射成像设备中获取的第三图像为DR图像,此时,可以直接将从辐射成像设备获取的DR图像(第三图像)作为待显示的第一图像,并对第一图像进行处理,生成用于显示的DR图像(第二图像)。
第二种情况
当第二图像和第三图像分别包括目标对象的各个位置的截面图像时,步骤S220、根据多个第三图像,确定多个第一图像包括:
将多个第三图像作为多个第一图像。
在这种情况下,由于第一图像、第二图像和第三图像均为包括目标对象的各个位置的截面图像,因此,可以直接将第三图像作为第一图像进行后续处理。例如,由辐射成像设备中获取的第三图像为CT图像,此时,可以直接将从辐射成像设备获取的CT图像(第三图像)作为待显示的第一图像,并对第一图像进行处理,生成用于显示的CT图像(第二图像)。
第三种情况
图3示出了图2中的步骤S220的一个示例的流程示意图。如图3所示,当第三图像为包括目标图像的各个位置的截面图像,第二图像为包括目标图像的各个方向的透视图像时,步骤S220、根据多个第三图像,确定多个第一图像包括:
S221、根据多个第三图像,生成包括目标对象的三维图像;
S222、根据三维图像,获取多个第一图像。
在这种情况下,由于第三图像为包括目标图像的各个位置的截面图像,第二图像为包括目标图像的各个方向的透视图像,因此,需要对多个第三图像进行处理,并且生成包括目标图像的各个位置的透视图像的第一图像,才能进行后续处理。此时,需要利用多张第三图像重建出其对应的三维图像后,再获取该三维图像中的内容在各个方向的透视图像,并将这些透视图像作为第一图像。例如,由辐射成像设备中获取的第三图像为CT图像(第三图像),此时,可以利用这些CT图像重建出与CT图像的内容对应的三维图像,然后利用该三维图像获得多张TSP图像作为待显示的第一图像,对第一图像进行处理后,可以生成用于显示的TSP图像(第二图像)。
因此,本发明实施例能够根据获取的第三图像和显示的第二图像的类型,对第三图像进行处理,从而获得与第二图像类型相同的第一图像。
下面,继续对本发明实施例的图像显示方法进行具体说明。
图4示出了图1中的步骤S110的一个示例的流程示意图。如图4所示,步骤S110、确定目标对象在多个第一图像中的对象位置的具体方法可以包括:
S111、确定目标对象的特征点或特征轴;
S112、根据特征点或特征轴,确定目标对象在多个第一图像中的对象位置。
在步骤S111中,特征点可以为目标对象的中心点、任意面上的一点或者任意边上的一点,特征轴可以为穿过目标对象的线轴。具体地,该线轴应当平行于获取多个包含目标对象的透视图像时,被检测物的转轴。
在步骤S112中,当确定了特征点或特征轴时,可以将该特征点或特征轴在第一图像中的位置作为目标对象在第一图像中的对象位置。
具体地,当利用特征点的位置作为目标对象的对象位置时,特征点的位置除了包括其在图像中的水平坐标和竖直坐标以外,还包括特征点的深度坐标,即该特征的在垂直于图像平面方向上距离图像平面的距离,即特征点的位置为特征点在第一图像中的三维坐标。当利用特征轴的位置作为目标对象的对象位置时,特征轴的位置除了包括其在图像平面中的坐标以外,还包括特征轴的深度坐标,即该特轴的在垂直于图像平面方向上距离图像平面的距离,即特征轴的位置为特征轴在第一图像中的三维坐标。
在本发明实施例中,目标位置为多个第二图像中的同一位置,并且,目标位置可以为根据对象位置确定的显示位置,或者预先设置的在对象位置之外的显示位置。
当目标位置为根据对象位置确定的显示位置时,显示位置可以为在对象位置中选择的一个确定的点或轴的位置。具体地,用户可以选择任意一张第一图像,并将目标对象的特征点或特征轴在该第一图像中的对象位置作为目标位置。
当目标位置为预先设置的在对象位置之外的显示位置时,显示位置可以为预先设置的确定的点或轴的位置,也可以为一个预先设定的显示区域。其中,当显示位置为预先设定的显示区域时,可以随机选择该显示区域内的任意点或者任意轴的位置,作为目标位置,但需要说明的是,当首次随机选择了位置后,目标位置即固定为该位置。
需要说明的是,预先设置的在对象位置之外的显示位置也可以为默认的显示位置,即第二图像的尺寸中心(中心点或中心线)
由此,在本发明实施例中,可以利用特征点或者特征轴表示目标对象,从而使目标对象的表示方式简单,容易获取代表目标对象的特征点或特征轴的对象位置。
图5示出了图1中的步骤S120的流程示意图。如图5所示,步骤S120、根据对象位置和目标位置处理多个第一图像,并生成与多个第一图像一一对应的多个第二图像的具体方法可以包括:
S121、获取多个第一图像的图像内容;
S122、根据对象位置和目标位置,移动图像内容,使目标对象位于目标位置,并生成第二图像。
即在本发明实施例中,可以将第一图像的图像内容整体平移,使目标对象的特征点或者特征轴位于目标位置。因此,在本发明实施例中,可以在不改变图像内容的尺寸、布局等的前提下,将目标对象设置于目标位置,从而生成第二图像。
基于上述的处理,在执行本发明实施例的步骤S130时,当依次显示第二图像时,可以在目标位置固定显示目标对象,从而方便用户查看多个第二图像及目标对象。其中,依次显示的方式可以为:当显示二维图像时,将目标图像的特征点或特征轴固定设置于目标位置,并依次显示各个DR图像或CT图像;当显示三维图像时,将目标图像的特征轴固定设置于目标位置,并以该特征轴为转轴,在以转轴旋转待检测物时,依次显示各个TSP图像。
需要说明的是,在本发明实施例中,当对第二图像进行放大、缩小等操作时,目标对象的特征点或特征轴始终固定显示于目标位置,并不发生改变,因此,能够进一步地方便用户查看多个第二图像及待检测物的目标图像。
例如,当多个第一图像分别为二维图像时,可以首先在各个第一图像上确定目标对象及该目标对象的特征点或特征轴(同一个目标对象仅有同一个点或轴作为其特征点或特征轴),同时,确定目标对象的特征点或特征轴在各个第一图像中的具***置(对象位置),该具***置即为特征点或特征轴的三维坐标。然后,可以在多个第一图像对应的多个对象位置中选择一个第一图像对应的对象位置为目标位置,最后,将其他第一图像的图像内容整体平移,使得这些第一图像对应的对象位置与目标位置的三维坐标完全相同,形成新的图像作为第二图像,从而在依次轮播显示第二图像时,实现目标对象的突出显示。
再例如,当多个第一图像分别为三维图像的各个视角的图像时,可以首先在各个第一图像上确定目标对象及该目标对象的特征轴(同一个目标对象仅有同一个轴作为其特征轴),同时,确定目标对象的特征轴在各个第一图像中的具***置(对象位置),该具***置即为特征轴的三维坐标。然后,可以在多个第一图像对应的多个对象位置中选择一个第一图像对应的对象位置为目标位置,最后,将其他第一图像的图像内容整体平移,使得这些第一图像对应的对象位置与目标位置的三维坐标完全相同,形成新的图像作为第二图像,从而在以该特征轴为转轴旋转显示三维图像的各个视角对应的第二图像时,实现目标对象的突出显示。
在本发明实施例中,DR图像、CT图像和TSP图像均可以通过二维图像的轮播显示形式显示对应的第二图像,而TSP图像还可以通过三维图像的绕转轴旋转各个视角的形式显示对应的第二图像。
下面,以两个具体实施例对本发明实施例的显示方法进行具体说明。
第一实施例
图6a、6b和6c分别示出了第一实施例中第一图像的示意图。图7a、7b和7c分别示出了第一实施例中第二图像的示意图。
如图6a-c所示,三个第一图像分别代表了对待检测物从三个方向成像获得的三个透视图像。第一图像中的图像内容包括长方体310、球体320和正方体330。如果想要突出显示长方体310,由于它在每个角度的第一图像上的位置都不同,轮播透视图像时,用户的人眼难以立刻定位该长方体310的位置。
因此,可以首先通过用户指定该长方体310,例如,可以在图6b所示的第一图像上通过用户确定选择长方体310作为目标对象,并将该长方体310的中心点O作为特征点(该特征点可以由客户指定,也可以由***指定)。其次,可以根据该中心点O确定其三维坐标,作为目标位置,三维坐标中的深度坐标可以由用户设定,也可以由***根据预定算法确定。再次,***可以根据该长方体310的中心点O,确定其在图6a和图6c所示的第一图像中的三维坐标,作为对象位置。最后,将图6a和图6c所示的第一图像的图像内容平移,使中心点O均位于图6b的中心点O的位置(目标位置)上,形成第二图像图7a-7c,并且轮播显示图7a-7c,从而实现对长方体310的突出显示。
第二实施例
图8示出了第二实施例中的三维图像的示意图。图9为图8所示的三维图像的俯视投影图。图10a、10b和10c分别示出了第二实施例中第一图像的示意图。图11a、11b和11c分别示出了第二实施例中第二图像的示意图。
如图8所示,显示了待检测物的三维图像,其对应的俯视投影图如图9所示。如图10a-c所示,三个第一图像分别代表了对待检测物从120°、180°、240°三个方向成像获得的三个透视图像。第一图像中的图像内容包括长方体410、球体420和圆柱体430。
如图10a-c所示,在以Z轴获得透视图像时,球体420在不同角度的透视图像上处于不同位置,因此,当以Z轴为转轴旋转时,球体420将显示在不同的位置,无法突出显示球体420,使用户的人眼难以立刻定位该球体420的位置。
因此,可以首先通过用户指定该球体420,例如,可以在图10a所示的第一图像上通过用户确定选择球体420作为目标对象,并将该球体420平行于Z轴的轴线421作为特征轴(该特征点可以由客户指定,也可以由***指定)。其次,可以根据该轴线421确定其三维坐标,作为目标位置,三维坐标中的深度坐标可以由用户设定,也可以由***根据预定算法确定。再次,***可以根据该球体420的轴线(即图中P轴),确定其在图10b和图10c所示的第一图像中的三维坐标,作为对象位置。最后,将图10b和图10c所示的第一图像的图像内容平移,使P轴均位于图10a的P轴的位置(目标位置)上,形成第二图像图11a-11c,并且以P轴为转轴旋转,以显示图11a-11c,从而实现对球体420的突出显示,并且球体420将保持不动。
综上所述,本发明实施例的图像显示方法,能够首先基于用户关注的目标对象,判断该目标对象在多个待显示的第一图像中对应的对象位置,然后根据目标对象在各个第一图像中的对象位置和期望将该目标对象显示的目标位置,对各个第一图像进行处理,并生成与各个第一图像分别一一对应的多个第二图像,从而可以在连续显示第二图像时,以在显示图像时使目标对象始终位于目标位置上。因此,用户在连续查看图像时,能够看到包含固定在同一目标位置显示的目标对象的第二图像,无需在图像中寻找目标对象,提高了用户查看图像以及目标对象的便利性。同时,当本发明实施例应用于利用辐射成像设备进行安全检查时,由于能够突出显示用户感兴趣的区域或者识别算法给出的危险品区域,因此,还能够提高安全检查的效率。
图12示出了本发明一个实施例提供的图像显示装置的结构示意图。如图12所示,本发明实施例提供的图像显示装置包括:
位置确定单元510,其配置为确定目标对象在多个第一图像中的对象位置;
图像生成单元520,其配置为根据对象位置和目标位置处理多个第一图像,并生成与多个第一图像一一对应的多个第二图像,其中,目标对象分别位于第二图像中的目标位置,目标位置为多个第二图像中的同一位置;
显示控制单元530,其配置为显示多个第二图像。
在本发明实施例中,位置确定单元510能够基于用户关注的目标对象,判断该目标对象在多个待显示的第一图像中对应的对象位置,图像生成单元520能够根据目标对象在各个第一图像中的对象位置和期望将该目标对象显示的目标位置,对各个第一图像进行处理,并生成与各个第一图像分别一一对应的多个第二图像,从而使显示控制单元530能够在连续显示第二图像时,使目标对象始终位于目标位置上。因此,用户在连续查看图像时,能够看到包含固定在同一目标位置显示的目标对象的第二图像,无需在图像中寻找目标对象,提高了用户查看图像以及目标对象的便利性。
图13示出了本发明另一个实施例提供的图像显示装置的结构示意图。如图13所示,图像显示装置还包括:
图像获取单元540,其配置为获取包含目标对象的多个第三图像;
图像处理单元550,其配置为根据多个第三图像,确定多个第一图像。
在本发明实施例中,图像获取单元540能够从图像采集设备(例如,辐射成像设备)获取关于待检测物的第三图像,图像处理单元550能够根据获取的第三图像和显示的第二图像的类型,对第三图像进行处理,从而获得与第二图像类型相同的第一图像。
具体地,当第二图像和第三图像分别为包括目标对象的各个方向的透视图像或第二图像和第三图像分别包括目标对象的各个位置的截面图像时,图像处理单元550被进一步配置为:将多个第三图像作为多个第一图像。当第三图像为包括目标图像的各个位置的截面图像,第二图像为包括目标图像的各个方向的透视图像时,图像处理单元550被进一步配置为:根据多个第三图像,生成包括目标对象的三维图像;根据三维图像,获取多个第一图像。
在本发明实施例中,位置确定单元510被进一步配置为:确定目标对象的特征点或特征轴;根据特征点或特征轴,确定目标对象在多个第一图像中的对象位置。
由此,在本发明实施例中,位置确定单元510可以利用特征点或者特征轴表示目标对象,从而使目标对象的表示方式简单,容易获取代表目标对象的特征点或特征轴的对象位置。
在本发明实施例中,图像生成单元520被进一步配置为:获取多个第一图像的图像内容;根据对象位置和目标位置,移动图像内容,使目标对象位于目标位置,并生成第二图像。
即在本发明实施例中,图像生成单元520可以将第一图像的图像内容整体平移,使目标对象的特征点或者特征轴位于目标位置。因此,在本发明实施例中,可以在不改变图像内容的尺寸、布局等的前提下,将目标对象设置于目标位置,从而生成第二图像。
本发明实施例中,显示控制单元530在显示第二图像时,当依次显示第二图像时,可以在目标位置固定显示目标对象,从而方便用户查看多个第二图像及目标对象。其中,依次显示的方式可以为:当显示二维图像时,将目标图像的特征点或特征轴固定设置于目标位置,并依次显示各个DR图像或CT图像;当显示三维图像时,将目标图像的特征轴固定设置于目标位置,并以该特征轴为转轴,在以转轴旋转待检测物时,依次显示各个TSP图像。
图14示出了本发明实施例提供的图像显示设备的硬件结构示意图。
在图像显示设备可以包括处理器601以及存储有计算机程序指令的存储器602。
具体地,上述处理器601可以包括中央处理器(CPU),或者特定集成电路(Application Specific Integrated Circuit,ASIC),或者可以被配置成实施本发明实施例的一个或多个集成电路。
存储器602可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器602可包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器602可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器602可在综合网关容灾设备的内部或外部。在特定实施例中,存储器602是非易失性固态存储器。在特定实施例中,存储器602包括只读存储器(ROM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。
处理器601通过读取并执行存储器602中存储的计算机程序指令,以实现上述实施例中的任意一种图像显示方法。
在一个示例中,图像显示设备还可包括通信接口603和总线610。其中,如图14所示,处理器601、存储器602、通信接口603通过总线610连接并完成相互间的通信。
通信接口603,主要用于实现本发明实施例中各模块、装置、单元和/或设备之间的通信。
总线610包括硬件、软件或两者,将在线数据流量计费设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(AGP)或其他图形总线、增强工业标准架构(EISA)总线、前端总线(FSB)、超传输(HT)互连、工业标准架构(ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、***组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线X10可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线,但本发明考虑任何合适的总线或互连。
该图像显示设备可以能够首先基于用户关注的目标对象,判断该目标对象在多个待显示的第一图像中对应的对象位置,然后根据目标对象在各个第一图像中的对象位置和期望将该目标对象显示的目标位置,对各个第一图像进行处理,并生成与各个第一图像分别一一对应的多个第二图像,从而可以在连续显示第二图像时,以在显示图像时使目标对象始终位于目标位置上,从而实现结合上述附图描述的图像显示方法和装置。
另外,结合上述实施例中的图像显示方法,本发明实施例可提供一种计算机存储介质来实现。该计算机存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种图像显示方法。
需要明确的是,本发明并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本发明的方法过程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本发明的精神后,作出各种改变、修改和添加,或者改变步骤之间的顺序。
以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时,其可以例如是电子电路、专用集成电路(ASIC)、适当的固件、插件、功能卡等等。当以软件方式实现时,本发明的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中,或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、ROM、闪存、可擦除ROM(EROM)、软盘、CD-ROM、光盘、硬盘、光纤介质、射频(RF)链路,等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
还需要说明的是,本发明中提及的示例性实施例,基于一系列的步骤或者装置描述一些方法或***。但是,本发明不局限于上述步骤的顺序,也就是说,可以按照实施例中提及的顺序执行步骤,也可以不同于实施例中的顺序,或者若干步骤同时执行。
以上所述,仅为本发明的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的***、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。

Claims (5)

1.一种图像显示方法,其特征在于,包括:
获取包含目标对象的多个第三图像,所述第三图像为包括所述目标对象的各个位置的截面图像;
根据所述多个第三图像,生成包括所述目标对象的三维图像;
根据所述三维图像,获取多个第一图像;
确定所述目标对象的特征点或特征轴;
根据所述特征点或特征轴,确定所述目标对象在所述多个第一图像中的对象位置;
获取所述多个第一图像的图像内容;
根据所述对象位置和目标位置,将所述多个第一图像的图像内容整体平移,以使所述目标对象的特征点或者特征轴位于目标位置,并生成第二图像,其中,所述目标对象分别位于所述第二图像中的所述目标位置,所述目标位置为所述多个第二图像中的同一位置,所述第二图像为包括所述目标对象的各个方向的透视图像;
显示所述多个第二图像。
2.根据权利要求1所述的图像显示方法,其特征在于,所述目标位置为:
根据所述对象位置确定的显示位置;
预先设置的在所述对象位置之外的显示位置。
3.一种图像显示装置,其特征在于,所述装置包括:
图像获取单元,其配置为获取包含目标对象的多个第三图像,所述第三图像为包括所述目标对象的各个位置的截面图像;
图像处理单元,其配置为根据所述多个第三图像,生成包括所述目标对象的三维图像;根据所述三维图像,获取多个第一图像;
位置确定单元,其配置为确定所述目标对象的特征点或特征轴;根据所述特征点或特征轴,确定所述目标对象在所述多个第一图像中的对象位置;
图像生成单元,其配置为获取所述多个第一图像的图像内容;根据所述对象位置和目标位置,将所述多个第一图像的图像内容整体平移,以使所述目标对象的特征点或者特征轴位于目标位置,并生成第二图像,其中,所述目标对象分别位于所述第二图像中的所述目标位置,所述目标位置为所述多个第二图像中的同一位置,所述第二图像为包括所述目标对象的各个方向的透视图像;
显示控制单元,其配置为显示所述多个第二图像。
4.一种图像显示设备,其特征在于,所述设备包括:处理器以及存储有计算机程序指令的存储器;
所述处理器执行所述计算机程序指令时实现如权利要求1-2任意一项所述的图像显示方法。
5.一种计算机存储介质,其特征在于,所述计算机存储介质上存储有计算机程序指令,所述计算机程序指令被处理器执行时实现如权利要求1-2任意一项所述的图像显示方法。
CN201811544361.7A 2018-12-17 2018-12-17 一种图像显示方法、装置、设备及计算机存储介质 Active CN111325077B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201811544361.7A CN111325077B (zh) 2018-12-17 2018-12-17 一种图像显示方法、装置、设备及计算机存储介质
EP19898062.5A EP3901815A4 (en) 2018-12-17 2019-09-10 METHOD, APPARATUS AND DEVICE FOR IMAGE DISPLAY AND COMPUTER STORAGE MEDIA
PCT/CN2019/105155 WO2020125081A1 (zh) 2018-12-17 2019-09-10 一种图像显示方法、装置、设备及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811544361.7A CN111325077B (zh) 2018-12-17 2018-12-17 一种图像显示方法、装置、设备及计算机存储介质

Publications (2)

Publication Number Publication Date
CN111325077A CN111325077A (zh) 2020-06-23
CN111325077B true CN111325077B (zh) 2024-04-12

Family

ID=71102473

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811544361.7A Active CN111325077B (zh) 2018-12-17 2018-12-17 一种图像显示方法、装置、设备及计算机存储介质

Country Status (3)

Country Link
EP (1) EP3901815A4 (zh)
CN (1) CN111325077B (zh)
WO (1) WO2020125081A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112434684B (zh) * 2021-01-27 2021-04-27 萱闱(北京)生物科技有限公司 基于目标检测的图像显示方法、介质、装置和计算设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105141828A (zh) * 2015-07-08 2015-12-09 成都西可科技有限公司 一种运动相机锁定场景后自动调整视角进行录制的方法
CN105979383A (zh) * 2016-06-03 2016-09-28 北京小米移动软件有限公司 图像获取方法及装置
WO2018104322A1 (en) * 2016-12-08 2018-06-14 Koninklijke Philips N.V. Simplified navigation of spinal medical imaging data
CN108848304A (zh) * 2018-05-30 2018-11-20 深圳岚锋创视网络科技有限公司 一种全景视频的目标跟踪方法、装置和全景相机

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005043464A2 (en) * 2003-11-03 2005-05-12 Bracco Imaging S.P.A. Dynamic crop box determination for optimized display of a tube-like structure in endoscopic view (“crop box”)
DE102005035929A1 (de) * 2005-07-28 2007-02-01 Siemens Ag Verfahren zur Darstellung mehrerer Bilder sowie ein Bildsystem zur Durchführung des Verfahrens
CN107403058B (zh) * 2010-07-21 2021-04-16 阿敏·E·莫尔勒 图像报告方法
JP5950619B2 (ja) * 2011-04-06 2016-07-13 キヤノン株式会社 情報処理装置
DE102011078212B4 (de) * 2011-06-28 2017-06-29 Scopis Gmbh Verfahren und Vorrichtung zum Darstellen eines Objektes
WO2014034948A1 (ja) * 2012-09-03 2014-03-06 株式会社東芝 超音波診断装置及び画像処理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105141828A (zh) * 2015-07-08 2015-12-09 成都西可科技有限公司 一种运动相机锁定场景后自动调整视角进行录制的方法
CN105979383A (zh) * 2016-06-03 2016-09-28 北京小米移动软件有限公司 图像获取方法及装置
WO2018104322A1 (en) * 2016-12-08 2018-06-14 Koninklijke Philips N.V. Simplified navigation of spinal medical imaging data
CN108848304A (zh) * 2018-05-30 2018-11-20 深圳岚锋创视网络科技有限公司 一种全景视频的目标跟踪方法、装置和全景相机

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Automatic Registration and Alignment on a Template of Cardiac Stress and Rest Reoriented SPECT Images;Jerome Declerck等;IEEE TRANSACTIONS ON MEDICAL IMAGING;19971231;第16卷(第6期);第727-737页 *

Also Published As

Publication number Publication date
WO2020125081A1 (zh) 2020-06-25
EP3901815A1 (en) 2021-10-27
CN111325077A (zh) 2020-06-23
EP3901815A4 (en) 2022-10-12

Similar Documents

Publication Publication Date Title
CN109410218B (zh) 用于生成车辆损伤信息的方法和装置
GB2535298B (en) Systems and methods for displaying location information for RFID Tags
CN105493154B (zh) 用于确定增强现实环境中的平面的范围的***和方法
CN106767852B (zh) 一种生成探测目标信息的方法、装置和设备
US20090160975A1 (en) Methods and Apparatus for Improved Image Processing to Provide Retroactive Image Focusing and Improved Depth of Field in Retail Imaging Systems
US20190204473A1 (en) Terahertz security check method and system
US20160171777A1 (en) Augmented reality asset locator
CN102982560A (zh) 根据rgb和深度图像的表面分割
US8881982B2 (en) Portable encoded information reading terminal configured to acquire images
CN104246793A (zh) 移动设备的三维脸部识别
US9430877B2 (en) Electronic device and method for selecting augmented content using the same
CN108174152A (zh) 一种目标监控方法及目标监控***
CN110428372B (zh) 深度数据与2d激光数据融合方法及装置、存储介质
EP3594907B1 (en) Method and apparatus for augmenting reality
JP2018537877A (ja) ライトフィールドコンテンツをエンコードする方法
WO2024002340A1 (zh) 对待测物中的目标对象进行追踪的方法及***
CN105378616A (zh) 虚拟触摸屏
CN111325077B (zh) 一种图像显示方法、装置、设备及计算机存储介质
Chromy et al. A 3D scan model and thermal image data fusion algorithms for 3D thermography in medicine
JP6616961B2 (ja) 状況的可視化のための電磁識別(emid)タグを用いた部品の位置決め
CN111429194B (zh) 用户轨迹确定***、方法、装置及服务器
US10976704B2 (en) Fingerprint authentication during holographic object display
JP2019061453A (ja) 情報処理装置
JP2015045919A (ja) 画像認識方法及びロボット
US10410331B2 (en) Computed tomography object inspection system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant