CN111160326A - Ct扫描全景实时监测方法和*** - Google Patents

Ct扫描全景实时监测方法和*** Download PDF

Info

Publication number
CN111160326A
CN111160326A CN202010252643.0A CN202010252643A CN111160326A CN 111160326 A CN111160326 A CN 111160326A CN 202010252643 A CN202010252643 A CN 202010252643A CN 111160326 A CN111160326 A CN 111160326A
Authority
CN
China
Prior art keywords
image
sickbed
images
panoramic
corner
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010252643.0A
Other languages
English (en)
Other versions
CN111160326B (zh
Inventor
傅鹏
曾凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Anke Medical Technology Co Ltd
Original Assignee
Nanjing Anke Medical Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Anke Medical Technology Co Ltd filed Critical Nanjing Anke Medical Technology Co Ltd
Priority to CN202010252643.0A priority Critical patent/CN111160326B/zh
Publication of CN111160326A publication Critical patent/CN111160326A/zh
Application granted granted Critical
Publication of CN111160326B publication Critical patent/CN111160326B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/04—Positioning of patients; Tiltable beds or the like
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches

Landscapes

  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Multimedia (AREA)
  • Biophysics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Artificial Intelligence (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Engineering & Computer Science (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种CT扫描全景实时监测方法和***，方法包括步骤：采用不同相机从不同角度拍摄包括整张病床和患者影像在内的多张图像，取不同相机在不同视角下拍摄的两张图像；分别对两张图像进行投影变换，计算出两张图像中病床的重叠长度，根据重叠长度进行图像拼接，得到全景图；定位人体关键点，包括人脸关键点；运动检测和面部表情检测。本发明通过多个相机采集图像，对图像进行投影拼接处理，生成CT扫描过程中的实时全景图，根据全景图实时无死角监控患者当前状态，使检测过程不会受到机架的遮挡，医生在扫描过程能够清晰看到患者状态，方便医生根据患者状态做出相应的措施。

Description

CT扫描全景实时监测方法和***
技术领域
本发明涉及医学成像技术领域，具体涉及一种CT扫描全景实时监测方法和***。
背景技术
在当前CT扫描流程中，缺少对患者扫描过程中进行监控的措施，因此无法记录检测患者扫描过程中的状态，例如：无法确定患者在扫描过程中是否发生运动；在患者注入造影剂时无法判断患者当前身体状态等。在公开号为CN110338835A的中国专利“一种智能扫描立体监测方法及***”中，提出了一种通过相机辅助CT扫描的方案，整个识别过程依据采集的第一图像，进行自动识别得到***信息，并且客观快速地判断出扫描区域，减少扫描操作人员的主观因素的影响，辅助扫描技师人工定位判断扫描区域，但该专利对相机采集到的图像处理时，并不能完全消除相机采集图像时的视野上的死角，仍存在受机架遮挡视野受阻的情况，且在持续采集的图像中不能实时反映出相机当前安装位置是否合适。
发明内容
技术目的：为解决上述技术问题，本发明提供了一种CT扫描全景实时监测方法，其通过多个相机采集图像，对图像进行投影拼接处理，生成CT扫描过程中的实时全景图，根据全景图中实时无死角监控患者当前状态，使检测过程不会受到机架的遮挡，医生在扫描过程能够清晰看到患者状态，方便医生根据患者状态做出相应的措施。
技术方案：为实现这一技术目的，本发明采用了如下技术方案：
一种CT扫描全景实时监测方法，其特征在于，包括步骤：
A、图像采集：采用不同相机从不同角度拍摄包括整张病床和患者影像在内的多张图像，取不同相机在不同视角下拍摄的两张图像，分别对应病床的初始位置和病床移动后的位置，标出两张图像中病床的四个角点的位置；
B、生成全景图：分别对两张图像进行投影变换，得到变换后的第一图像和第二图像，根据第一图像、第二图像中的病床的角点的位置及病床长度，计算出两张图像中病床的重叠长度，根据重叠长度进行图像拼接，得到全景图；
C、定位人体关键点：将得到的全景图输入训练好的关键点检测神经网络，输出关键点掩模，最终通过阈值判断找出掩膜中人体关键点的坐标，包括人脸关键点；
D、运动检测：按照步骤A至C的方法得到对应不同时刻的全景图，将当前全景图中人体关键点之间的相对位置，与之前时刻生成的全景图相比较，相对位置包括不同关键点之间的像素夹角和像素长度，若相对位置变化超出阈值，判断患者发生移动；
E、面部表情检测：根据人脸关键点确定人脸位置，并对人脸表情进行分类，并输出识别结果。
优选地，所述步骤A中，取俯视视角下的图像，病床移动后的位置选取病床移动的最大位置。
优选地，分别采用相机一和相机二拍摄初始位置和最大位置的图片，记录病床初始位置、最大位置和移动距离，步骤B中全景图的生成步骤包括：
B1、分别在相机一拍摄到的初始位置的图像和相机二拍摄到的最大位置的图像中标记病床角点像素坐标，得到的每组角点像素坐标分别对应病床左上角、右上角、左下角和右下角；
B2、将病床标准角点坐标代入投影变换公式，求出投影变换公式的图像变换系数；
B3、将步骤B1得到的角点像素坐标分别代入投影变换公式，求出变换后的角点坐标，计算对应的第一图像和第二图像；
B4、计算第一图像和第二图像的重叠区域，根据病床物理宽度、物理长度、重叠区域和移动距离，计算出重叠区域像素尺寸；
B5、根据病床标准角点坐标和重叠区域像素尺寸，融合第一图像和第二图像，生成全景图。
优选地，所述步骤B中，投影变换公式为：
Figure 435298DEST_PATH_IMAGE001
，其中，
Figure 139949DEST_PATH_IMAGE002
为变换后病床的角点坐标，
Figure 885051DEST_PATH_IMAGE003
为原始标记的病床的角点坐标；
图像中标准病床为矩形，病床标准角点坐标为
Figure 885630DEST_PATH_IMAGE004
、
Figure 512921DEST_PATH_IMAGE005
、
Figure 21262DEST_PATH_IMAGE006
、
Figure 417609DEST_PATH_IMAGE007
，其中，
Figure 87624DEST_PATH_IMAGE008
，
Figure 202211DEST_PATH_IMAGE009
，
Figure 186347DEST_PATH_IMAGE010
，
Figure 702779DEST_PATH_IMAGE011
，标准病床宽度像素尺 寸为
Figure 543697DEST_PATH_IMAGE012
，标准病床长度像素尺寸为
Figure 912623DEST_PATH_IMAGE013
；将四个角点坐标分别代入投影变换公式，通过 最小二乘法公式求解出
Figure 497188DEST_PATH_IMAGE014
矩阵，得到：
Figure 71389DEST_PATH_IMAGE015
；
将相机一和相机二拍摄的图像点集分别代入上述公式，得到变换后的第一图像和第二图像。
优选地，所述步骤B中，计算第一图像和第二图像的重叠区域，步骤为：
根据病床物理宽度TableWidth，物理长度TableLength，计算变换后x方向和y方向上的图像像素尺寸：
Figure 83207DEST_PATH_IMAGE016
Figure 172386DEST_PATH_IMAGE017
根据病床移动距离L，进一步计算重叠区域像素尺寸：
Figure 560642DEST_PATH_IMAGE018
融合图像生成全景图Pic，生成公式为：
Figure 989350DEST_PATH_IMAGE019
其中picN1为经过变换后第一图像，picN2为经过变换后第二图像。
优选地，所述步骤E中，对人脸的表情分类采用表情分类级联卷积神经网络，输出类别包括痛苦表情和其他表情两种。
优选地，所述步骤C中，人体关键点包括双眼、鼻子、嘴角、颈部、双肩、胯部、膝盖和双脚。
本发明还公开了一种实现所述方法的CT扫描全景实时监测***，其特征在于，包括：图像获取模块，用于不同角度拍摄包括病床和患者影像在内的图像；
第一图像处理模块，用于对拍摄的图像进行投影和拼接处理，生成全景图；
第二图像处理模块，用于对全景图进行关键点检测和图像分割处理，输出带有人体关键点标记的预设尺寸的图像；
第三图像处理模块，用于识别图像中人体关键点的位置变化，并输出结果；
第四图像处理模块，用于识别图像中人脸表情的类型，并输出结果。
本发明还公开了一种实现所述方法的CT扫描全景实时监测***，其特征在于：包括处理器和存储器，所述存储器存储用于执行所述方法的程序，存储器通信连接处理器，处理器用于执行所述程序。
技术效果：由于采用了上述技术方案，本发明具有如下技术效果：
本发明通过多个相机采集不同角度、不同时刻的图像，对得到的图像进行投影变换处理，拼接出CT扫描过程中的实时全景图，在全景图中实时无死角监控患者当前状态，使检测过程不会受到机架的遮挡，全程记录患者扫描过程中的运动轨迹，为后期图像降噪提供一定的帮助和依据，将患者当前表情状态反馈给扫描技师，使得医生在扫描过程能够清晰看到患者状态，是否发生运动、是否有痛苦表情等，方便医生及时做出处理，且本发明能够利用现有CT产品硬件，将算法集成在影像链中。
附图说明
图1为本发明的CT扫描全景实时监测方法的流程图；
图2为相机安装在病床周围的示意图；
图3为本发明中对全景图的拼接示意图，其中，图a为经过投影变换后Cam1拍摄的图像，图b为经过投影变换后Cam2拍摄的图像，图c为拼接之后的图像；
图4为医生视角的病床和机架的侧面视角示意图；
图5为单一相机的病床和机架的侧面视角示意图；
图6为机架两侧分别设置相机的示意图；
图7为关键点检测神经网络的示意图；
图8为表情识别网络的示意图。
具体实施方式
图1为本发明的CT扫描全景实时监测方法的流程图，其中，Cam1和Cam2为彩色相机，从不同的角度拍摄病床，然后将相机拍摄的两幅图变换到相同视角，然后将变换后的两幅图进行拼接得到全景图，然后通过图像分割算法检测出人***置，最终比较患者在扫描过程中是否出现运动，同时定位人脸部位，将人脸表情进行分类，并实时提醒扫描技师。
具体流程如下：
S1：Cam1、Cam2拍摄图像；
S2：将拍摄的图像变换、拼接，生成全景图；
S3：识别定位人体关键点，根据人脸关键点位置确定人脸位置；
S4：比较多个图片中人体关键点相对位置是否发生移动；
S5：将人脸表情进行分类。
S1中，Cam1和Cam2从不同的角度拍摄病床，能够在扫描过程中全程监控患者状态。相机安装位置如图2所示，虚线病床表示病床前进的最大位置，Cam1和Cam2安装位置示意图3，相机安装的高度使得Cam2能够拍摄到完整的病床。C1，C2，C3，C4为病床的四个角点。
由于病床目前CT产品中必不可少的配件之一，本发明中依据病床角点位置进行拼接，一方面病床角点特征明显且稳定，利于图像进行更高精度拼接，另一方面避免使用特定的标定板或者标定工具，减少设备部署成本。同时依据病床的四个角点的位置，能够验证相机安装位置是否合理，验证相机当前的安装位置能否全方位监控病人在病床上的状态。
S2中，将Cam1和Cam2中两个图进行变换拼接，步骤如下：
S2.1、将病床移动到初始位置P1，Cam1拍摄病床；
S2.2、将病床移动到最大位置P2，移动距离为L，如图2虚线病床所示，Cam2拍摄病床；从部署的角度来说，将病床移动到最大位置也可以验证当前相机安装位置，是否能够覆盖极限位置的病床状态。所以优选将病床从初始位置移动到最大位置。
S2.3、以病床前进方向作为y方向，对应病床长度方向，在Cam1拍摄图像中标记病床角点像素坐标，分别为(x11,y11)，(x12,y12)，(x13,y13)，(x14,y14)，分别对应病床左上角，右上角，左下角，右下角；
在Cam2拍摄图像中标记病床角点像素坐标，分别为(x21,y21)，(x22,y22)，(x23,y23)，(x24,y24) ，分别对应病床左上角，右上角，左下角，右下角；
S2.4、对Cam1和Cam2拍摄的图像分别进行投影变换，以Cam1拍摄的图像为例：
投影变换矩阵为：
Figure 172069DEST_PATH_IMAGE020
=
Figure 14123DEST_PATH_IMAGE021
，
初始病床角点坐标为(x11,y11),(x12,y12),(x13,y13),(x14,y14)，图1病床角点标准 坐标为
Figure 940491DEST_PATH_IMAGE022
、
Figure 223705DEST_PATH_IMAGE023
、
Figure 344370DEST_PATH_IMAGE024
、
Figure 142561DEST_PATH_IMAGE025
，分别对应图像1中病床左上角坐标，右上 角坐标，左下角坐标，右下角坐标，其中，
Figure 138199DEST_PATH_IMAGE026
，
Figure 72657DEST_PATH_IMAGE027
，
Figure 66021DEST_PATH_IMAGE028
，
Figure 351509DEST_PATH_IMAGE029
， 使得图像中标准病床为矩形。同时可计算出标准病床像素宽度：
Figure 885258DEST_PATH_IMAGE030
标准病床像素长度：
Figure 939802DEST_PATH_IMAGE031
将四个角点坐标分别代入：
Figure 104067DEST_PATH_IMAGE032
，
其中
Figure 611272DEST_PATH_IMAGE033
为标准角点坐标点集，
Figure 450177DEST_PATH_IMAGE034
为原始角点坐标点集。通过最小二乘法公式求解 出
Figure 624807DEST_PATH_IMAGE035
矩阵，
Figure 694394DEST_PATH_IMAGE036
最后将Cam1拍摄的图像点集代入上述公式，可得变换后的图像。同理可求得Cam2变换后的图像；
S2.5：计算图像重叠区域 ，如图3c中所示，已知病床物理宽度TableWidth，物理长度TableLength，计算出变换后图像像素尺寸：
Figure 954474DEST_PATH_IMAGE037
Figure 564447DEST_PATH_IMAGE038
通过病床位置计算出重叠区域像素尺寸：
Figure 859162DEST_PATH_IMAGE039
其中L为病床移动距离；
本发明中利用病床物理尺寸和移动距离计算重叠区域，能够减少计算复杂度并且利于算法后期维护；
S2.6、 融合图像生成全景图Pic，公式如下：
Figure 896388DEST_PATH_IMAGE040
其中picN1为经过变换后Cam1图像，picN2为经过变换后Cam2图像；
本发明中，利用重叠区域进行全景融合相比一般常用配准方法计算量更小速度更快。通过最小二乘法计算出
Figure 847026DEST_PATH_IMAGE042
。最小二乘实质上是利用最小误差的平方寻求数据的最佳匹配函数，求解的参数更加符合条件；求解该参数矩阵也可以用其他优化方法，例如梯度下降法。
变换后图像如图3所示。根据病床重叠长度即可拼接图像，如图c所示。
图4至图6为侧面视角示意图，图中阴影部分为被机架遮挡住的视野，在图4医生视角和图5单一相机拍摄的方法下，只能看到机架一侧，在本方法中使用Cam1和Cam2图像并做拼接形成全景图，视野上能够完全绕过机架，看到人体在全部扫描过程中的动态。本发明采用的全景图能够在所有病床位置看到人体，因此不会影响关键点检测。
S3中，通过神经网络输出人体关键点，其中关键点包括不限于双眼，鼻子，嘴角，颈部，双肩，胯部，膝盖，双脚等，通过tensorflow框架训练网络。网络输入数据大小为1*640*480，网络输出数据形状为nkp+1*640*480，其中，nkp为人体关键点数量，网络损失函数为交叉熵函数，如下：
Figure 260690DEST_PATH_IMAGE043
其中，
Figure 409912DEST_PATH_IMAGE044
为真实数据标记，
Figure DEST_PATH_IMAGE045
为网络预测概率。
预测：将S2处理后的全景图输入网络，输出关键点掩模。最终通过阈值判断找出掩膜中关键点坐标。根据眼睛、鼻子、耳朵确定人脸位置。
S4中，计算检测出的关键点之间的相对位置，从而确定患者是否发生移动。例如，计算颈部关键点和其他关键点之间的像素夹角和像素长度，与之前的帧相比较，当其变化超过阈值则反馈患者移动。
S5：表情识别通过神经网络实现，如图7所示。
S3中确定人脸位置，取固定大小的区域作为患者表情识别的输入图，通过插值将图像变换为128*128大小。
训练：选取临床图片10000例，手动将其按照表情分类，分为痛苦和其他类别，用于训练表情分类网络。网络损失函数采用交叉熵：
Figure 119504DEST_PATH_IMAGE046
其中，
Figure 88597DEST_PATH_IMAGE044
为真实数据标记，
Figure 40373DEST_PATH_IMAGE045
为网络预测概率。
预测：将S3确定的人脸区域归一化到128*128大小后输入网络，输出患者表情类别，并实时展示在扫描界面。
本发明的步骤S2中，通过图像拼接无死角显示患者，其中相机个数和安装位置不局限于S1中所描述，步骤S4中监控患者在扫描过程中是否发生运动，方法不局限于关键点比较，也可以是其他方法，步骤S5中通过图片分类确认患者表情，其中患者表情识别方法不局限于神经网络，也可以是传统的特征提取和其他分类方法。
以上所述仅是本发明的优选实施方式，应当指出：对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (9)

1.一种CT扫描全景实时监测方法，其特征在于，包括步骤：
A、图像采集：采用不同相机从不同角度拍摄包括整张病床和患者影像在内的多张图像，取不同相机在不同视角下拍摄的两张图像，分别对应病床的初始位置和病床移动后的位置，标出两张图像中病床的四个角点的位置；
B、生成全景图：分别对两张图像进行投影变换，得到变换后的第一图像和第二图像，根据第一图像、第二图像中的病床的角点的位置及病床长度，计算出两张图像中病床的重叠长度，根据重叠长度进行图像拼接，得到全景图；
C、定位人体关键点：将得到的全景图输入训练好的关键点检测神经网络，输出关键点掩模，最终通过阈值判断找出掩膜中人体关键点的坐标，包括人脸关键点；
D、运动检测：按照步骤A至C的方法得到对应不同时刻的全景图，将当前全景图中人体关键点之间的相对位置，与之前时刻生成的全景图相比较，相对位置包括不同关键点之间的像素夹角和像素长度，若相对位置变化超出阈值，判断患者发生移动；
E、面部表情检测：根据人脸关键点确定人脸位置，并对人脸表情进行分类，并输出识别结果。
2.根据权利要求1所述的CT扫描全景实时监测方法，其特征在于：所述步骤A中，取俯视视角下的图像，病床移动后的位置选取病床移动的最大位置。
3.根据权利要求2所述的CT扫描全景实时监测方法，其特征在于：分别采用相机一和相机二拍摄初始位置和最大位置的图片，记录病床初始位置、最大位置和移动距离，步骤B中全景图的生成步骤包括：
B1、分别在相机一拍摄到的初始位置的图像和相机二拍摄到的最大位置的图像中标记病床角点像素坐标，得到的每组角点像素坐标分别对应病床左上角、右上角、左下角和右下角；
B2、将病床标准角点坐标代入投影变换公式，求出投影变换公式的图像变换系数；
B3、将步骤B1得到的角点像素坐标分别代入投影变换公式，求出变换后的角点坐标，计算对应的第一图像和第二图像；
B4、计算第一图像和第二图像的重叠区域，根据病床物理宽度、物理长度、重叠区域和移动距离，计算出重叠区域像素尺寸；
B5、根据病床标准角点坐标和重叠区域像素尺寸，融合第一图像和第二图像，生成全景图。
4.根据权利要求2所述的CT扫描全景实时监测方法，其特征在于，所述步骤B中，投影变 换公式为：
Figure 341388DEST_PATH_IMAGE001
，其中，
Figure 764758DEST_PATH_IMAGE002
为变换后病床的角点坐标，
Figure 221148DEST_PATH_IMAGE003
为原始标记的病床的角点坐标；
图像中标准病床为矩形，病床标准角点坐标为
Figure 179876DEST_PATH_IMAGE004
、
Figure 38111DEST_PATH_IMAGE005
、
Figure 853620DEST_PATH_IMAGE006
、
Figure 797305DEST_PATH_IMAGE007
，其中，
Figure 356463DEST_PATH_IMAGE008
，
Figure 69204DEST_PATH_IMAGE009
，
Figure 55614DEST_PATH_IMAGE010
，
Figure 988061DEST_PATH_IMAGE011
，标准病床宽度像素尺 寸为
Figure 288592DEST_PATH_IMAGE012
，标准病床长度像素尺寸为
Figure 855839DEST_PATH_IMAGE013
；将四个角点坐标分别代入投影变换公式，通过 最小二乘法公式求解出
Figure 278731DEST_PATH_IMAGE014
矩阵，得到：
Figure 197008DEST_PATH_IMAGE015
；
将相机一和相机二拍摄的图像点集分别代入上述公式，得到变换后的第一图像和第二图像。
5.根据权利要求4所述的CT扫描全景实时监测方法，其特征在于：所述步骤B中，计算第一图像和第二图像的重叠区域，步骤为：
根据病床物理宽度TableWidth，物理长度TableLength，计算变换后x方向和y方向上的图像像素尺寸：
Figure 832389DEST_PATH_IMAGE016
Figure 722984DEST_PATH_IMAGE017
根据病床移动距离L，进一步计算重叠区域像素尺寸：
Figure 51197DEST_PATH_IMAGE018
融合图像生成全景图Pic，生成公式为：
Figure 456771DEST_PATH_IMAGE019
其中picN1为经过变换后第一图像，picN2为经过变换后第二图像。
6.根据权利要求1所述的CT扫描全景实时监测方法，其特征在于，所述步骤E中，对人脸的表情分类采用表情分类级联卷积神经网络，输出类别包括痛苦表情和其他表情两种。
7.根据权利要求1所述的CT扫描全景实时监测方法，其特征在于，所述步骤C中，人体关键点包括双眼、鼻子、嘴角、颈部、双肩、胯部、膝盖和双脚。
8.一种实现权利要求1至7任一所述方法的CT扫描全景实时监测***，其特征在于，包括：图像获取模块，用于不同角度拍摄包括病床和患者影像在内的图像；
第一图像处理模块，用于对拍摄的图像进行投影和拼接处理，生成全景图；
第二图像处理模块，用于对全景图进行关键点检测和图像分割处理，输出带有人体关键点标记的预设尺寸的图像；
第三图像处理模块，用于识别图像中人体关键点的位置变化，并输出结果；
第四图像处理模块，用于识别图像中人脸表情的类型，并输出结果。
9.一种实现权利要求1-7任一所述方法的CT扫描全景实时监测***，其特征在于：包括处理器和存储器，所述存储器存储用于执行所述方法的程序，存储器通信连接处理器，处理器用于执行所述程序。
CN202010252643.0A 2020-04-02 2020-04-02 Ct扫描全景实时监测方法和*** Active CN111160326B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010252643.0A CN111160326B (zh) 2020-04-02 2020-04-02 Ct扫描全景实时监测方法和***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010252643.0A CN111160326B (zh) 2020-04-02 2020-04-02 Ct扫描全景实时监测方法和***

Publications (2)

Publication Number Publication Date
CN111160326A true CN111160326A (zh) 2020-05-15
CN111160326B CN111160326B (zh) 2020-07-28

Family

ID=70567775

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010252643.0A Active CN111160326B (zh) 2020-04-02 2020-04-02 Ct扫描全景实时监测方法和***

Country Status (1)

Country Link
CN (1) CN111160326B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112529006A (zh) * 2020-12-18 2021-03-19 平安科技（深圳）有限公司 全景图片的检测方法、装置、终端及存储介质
CN115938023A (zh) * 2023-03-15 2023-04-07 深圳市皇家金盾智能科技有限公司 智能门锁人脸识别解锁方法、装置、介质及智能门锁

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104933409A (zh) * 2015-06-12 2015-09-23 北京理工大学 一种基于全景图像点线特征的车位识别方法
WO2016086754A1 (zh) * 2014-12-03 2016-06-09 中国矿业大学 一种大场景视频图像拼接方法
US20170231200A1 (en) * 2014-07-16 2017-08-17 Elwha Llc Remote pet monitoring systems and methods
CN109961394A (zh) * 2017-12-23 2019-07-02 沈阳灵景智能科技有限公司 一种mri/pet/ct/pet-ct全景视频辅助***

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170231200A1 (en) * 2014-07-16 2017-08-17 Elwha Llc Remote pet monitoring systems and methods
WO2016086754A1 (zh) * 2014-12-03 2016-06-09 中国矿业大学 一种大场景视频图像拼接方法
CN104933409A (zh) * 2015-06-12 2015-09-23 北京理工大学 一种基于全景图像点线特征的车位识别方法
CN109961394A (zh) * 2017-12-23 2019-07-02 沈阳灵景智能科技有限公司 一种mri/pet/ct/pet-ct全景视频辅助***

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
国家***人事司: "《地图制图技师版》", 30 June 2009, 测绘出版社 *
宋玲 等: "《http://kns.cnki.net/kcms/detail/11.2127.TP.20200110.1811.014.html》", 《人体关键点检测的MASK R-CNN网络模型改进研究》 *
徐春广等: "《回转体的结构光测量原理》", 31 January 2017, 国防工业出版社 *
赵问道: "《多媒体技术原理与应用》", 30 June 2007, 浙江大学出版社 *
黄祚继等: "《近景摄影测量影像匹配方法研究与应用》", 30 September 2017, 河海大学出版社 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112529006A (zh) * 2020-12-18 2021-03-19 平安科技（深圳）有限公司 全景图片的检测方法、装置、终端及存储介质
CN112529006B (zh) * 2020-12-18 2023-12-22 平安科技（深圳）有限公司 全景图片的检测方法、装置、终端及存储介质
CN115938023A (zh) * 2023-03-15 2023-04-07 深圳市皇家金盾智能科技有限公司 智能门锁人脸识别解锁方法、装置、介质及智能门锁
CN115938023B (zh) * 2023-03-15 2023-05-02 深圳市皇家金盾智能科技有限公司 智能门锁人脸识别解锁方法、装置、介质及智能门锁

Also Published As

Publication number Publication date
CN111160326B (zh) 2020-07-28

Similar Documents

Publication Publication Date Title
CN107920722B (zh) 针对自胶囊相机所撷取的图像通过对象检测进行重建
CN106657910B (zh) 一种电力变电站的全景视频监控方法
US11335456B2 (en) Sensing device for medical facilities
CN111160326B (zh) Ct扫描全景实时监测方法和***
JP6830082B2 (ja) 歯科分析システムおよび歯科分析ｘ線システム
JP6501800B2 (ja) 信頼度マッチング付き生体内マルチカメラカプセルからの画像の再構築
JP4948552B2 (ja) カメラ校正装置、カメラ校正方法、カメラ校正プログラムおよびそのプログラムを記録した記録媒体
JP3910239B2 (ja) 医用画像合成装置
DE102016102751A1 (de) Anatomisch spezifische filmgetriebene medizinische Bildbegutachtung
WO2011043458A1 (ja) 医用画像処理装置、ｘ線撮影装置、医用画像処理プログラム、及び医用画像処理方法
CN114531549B (zh) 图像采集方法、电子设备和计算机可读存储介质
JP2004236910A (ja) 医用画像の貼り合わせ装置
CN110910449B (zh) 识别物体三维位置的方法和***
CN114787869A (zh) 用于在医学成像流程期间监测对象的装置、方法和计算机程序
US8184149B2 (en) Ophthalmic apparatus and method for increasing the resolution of aliased ophthalmic images
JP7300895B2 (ja) 画像処理装置および画像処理方法、プログラム、並びに記憶媒体
US20230012297A1 (en) Determining Spatial Relationship Between Upper and Lower Teeth
CN115474951A (zh) 用于控制对象的医学成像检查的方法、医学成像***和计算机可读数据存储介质
CN114241276A (zh) 一种弱配准下红外与可见光融合方法及双目成像装置
KR102534981B1 (ko) 표면 영상유도 기반의 환자 위치 정렬 및 모니터링 시스템
EP4295775A1 (en) Patient monitoring during a scan
KR101402494B1 (ko) 전산화 단층 촬영장치의 고화질 영상 획득 방법
EP4295774A1 (en) Patient monitoring during a scan
CN113409312B (zh) 一种用于生物医疗影像的图像处理方法和装置
CN108615223A (zh) 基于局部优化算法的牙齿唇颊侧全景图像拼接方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant