CN114305299A - 一种减小内窥镜辅助软件显示延时的方法、***和应用 - Google Patents

Abstract

本发明提供一种减小内窥镜辅助软件显示延时的方法、***和应用，通过内窥镜设备采集实时图像。将所述实时图像输入图像处理模块，获取处理图像。将所述实时图像和处理图像输入FPGA模块。所述实时图像连接到所述FPGA模块的下层显示区域。所述处理图像连接到所述FPGA模块的上层显示区域。所述实时图像和处理图像在所述FPGA模块内叠加后通过屏幕输出并显示。本发明在传统处理方式的基础上引入FPGA模块，能够减少内窥镜图像显示延时，解决传统内窥镜检测辅助***存在难以忽视的显示延迟的问题，避免医生在使用内窥镜检测时因显示延迟而错过最佳操作时机,提高了检测操作或者手术操作的体验感。

Description

一种减小内窥镜辅助软件显示延时的方法、***和应用

技术领域

本发明涉及医疗图像的计算机辅助处理技术领域，尤其涉及一种减小内窥镜辅助软件显示延时的方法。

背景技术

随着AI技术的发展，AI技术在医疗上的应用越来越多，在内镜检测领域中，很多处理后的图像都是AI技术基于现场图像进行分析得到的，为确保医护人员能够同时查看原图和处理后的图，内镜检测设备的屏幕中需要同时显示内窥镜传回的内镜图像和AI处理后的辅助结果信息。

基于上述场景，AI实时辅助软件在保证图像处理结果被及时显示的同时，需要保证内窥镜输出图像显示的实时性。

目前，大多数产商采用的做法是使用采集卡采集内窥镜的输出图像，然后将这个图像同时作为内窥镜输出图像显示区域的输入图像和图像处理(AI计算)的输入图像。这种方式对于屏幕上的内窥镜输出图像显示会出现显示延时，该延时长度取决于所采用的采集卡性能，通常延时会在一帧以上，该延时可能会影响医生的操作时机,给检测操作或者手术操作带来不好的影响和体验感，需进一步改进。

发明内容

本发明实施例提供一种减小内窥镜辅助软件显示延时的方法和应用，该技术方案能够有效减少内窥镜图像显示延时，以辅助医生进行检查或手术。

第一方面，提出一种减小内窥镜辅助软件显示延时的方法，包括：

通过内窥镜设备采集实时图像。

将所述实时图像输入图像处理模块，获取处理图像。

将所述实时图像和处理图像输入FPGA模块。所述实时图像连接到所述FPGA模块的下层显示区域。所述处理图像连接到所述FPGA模块的上层显示区域。所述实时图像和处理图像在所述FPGA模块内叠加后通过屏幕输出并显示。

本发明在传统处理方式的基础上引入FPGA模块，能够减少内窥镜图像显示延时，解决传统内窥镜检测辅助***存在难以忽视的显示延迟的问题，避免医生在使用内窥镜检测时因显示延迟而错过最佳操作时机,提高了检测操作或者手术操作的体验感。

优选的，所述实时图像从所述内窥镜设备到FPGA模块，再到所述屏幕，采用直通连接，不涉及视频数据的加解密，不会增加显示延时，最大限度地保持了内窥镜图像的显示及时性。

优选的，所述图像处理模块配有采集卡，所述采集卡和内窥镜设备的图像输出端连接。

优选的，所述图像处理模块采用AI处理技术。

优选的于，所述图像处理模块将处理结果和界面元素一起显示，输出分辨率设置为1920*1080。

优选的，所述图像处理模块的输出以特定的像素点表示镜区显示区域。

优选的，所述像素点的数据在UI元素中不存在。

优选的，所述FPGA模块将处理图像中的像素点替换成实时图像的。

第二方面，提出一种减小内窥镜辅助软件显示延时的***，包括：

数据采集模块，通过内窥镜设备采集实时图像；

数据处理模块，通过图像处理模块处理所述实时图像，获取处理图像。将所述实时图像和处理图像输入FPGA模块。所述实时图像连接到所述FPGA模块的下层显示区域。所述处理图像连接到所述FPGA模块的上层显示区域。所述实时图像和处理图像在所述FPGA模块内叠加后通过屏幕输出并显示。

第三方面，提出一种减小内窥镜辅助软件显示延时的设备，包括：存储器、处理器。所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器执行如第一方面所述的减小内窥镜辅助软件显示延时的方法。

第四方面，发明实施例提供了一种非暂时性机器可读存储介质，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现第一方面中的减小内窥镜辅助软件显示延时的方法。

在本发明实施例中，给出了一种减小内窥镜辅助软件显示延时的方法、***和应用，在传统处理方式的基础上引入FPGA模块，能够减少内窥镜图像显示延时，解决传统内窥镜检测辅助***存在难以忽视的显示延迟的问题，避免医生在使用内窥镜检测时因显示延迟而错过最佳操作时机,同时通过像素替换的方式来保证两个图像的同时显示，提高了检测操作或者手术操作的体验感。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本发明的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。

其中：

图1是传统内镜检测辅助软件的工作原理；

图2是本发明提供的内镜检测辅助软件的工作原理。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义，“多种”一般包含至少两种。

取决于语境，如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。

随着AI技术的发展，AI技术在医疗上的应用越来越多，包括内镜检测领域，大多数产商使用采集卡采集内窥镜的输出图像，然后将这个图像同时作为内窥镜输出图像显示区域的输入图像和图像处理(AI计算)的输入图像，如图1所示。这种方式对于屏幕上的内窥镜输出图像显示会出现显示延时，该延时长度取决于所采用的采集卡性能，通常延时会在一帧以上，该延时可能会影响医生的操作时机,给检测操作或者手术操作带来不好的影响和体验感。

针对上述问题，本发明提出一种减小内窥镜辅助软件显示延时的方法，通过在传统处理方式的基础上引入FPGA模块，能够减少内窥镜图像显示延时，解决传统内窥镜检测辅助***存在难以忽视的显示延迟的问题。

本发明的方法、***、设备和介质的实现原理相似，此处不再赘述。

在介绍了本发明的基本原理之后，下面具体介绍本发明的各种非限制性实施方式，要注意的是，本发明提供的实施例仅是为了便于理解本发明的精神和原理而示出，本发明的实施方式在此方面不受任何限制。相反，本发明的实施方式可以应用于适用的任何***。

实施例一：

一种减小内窥镜辅助软件显示延时的方法，如图2，包括：

S10，通过内窥镜设备采集实时图像。

S20，将所述实时图像输入包含有图像处理模块的工作站，获取处理图像，此为图片流向L1。

优选的，所述图像处理模块采用AI处理技术，配有采集卡，所述采集卡和内窥镜设备的图像输出端连接。

S30，将所述实时图像和处理图像输入FPGA模块，分别为图片流向L3和图片流向L2。所述实时图像连接到所述FPGA模块的下层显示区域。所述处理图像连接到所述FPGA模块的上层显示区域。所述实时图像和处理图像在所述FPGA模块内叠加后通过屏幕输出并显示，为图片流向L4。

优选的，所述图像处理模块将处理结果和界面元素一起显示，输出分辨率设置为1920*1080。

本实施例中，所述实时图像从所述内窥镜设备到FPGA模块，再到所述屏幕，采用直通连接，不涉及视频数据的加解密，不会增加显示延时，最大限度地保持了内窥镜图像的显示及时性。优选的，所述图像处理模块的输出以特定的像素点表示镜区显示区域，且述像素点的数据在UI元素中不存在。所述FPGA模块将处理图像中的像素点替换成实时图像的。

本发明在传统处理方式的基础上引入FPGA模块，能够减少内窥镜图像显示延时，解决传统内窥镜检测辅助***存在难以忽视的显示延迟的问题，避免医生在使用内窥镜检测时因显示延迟而错过最佳操作时机,同时通过像素替换的方式来保证两个图像的同时显示，提高了检测操作或者手术操作的体验感。

实施例二：

一种减小内窥镜辅助软件显示延时的***，包括：

数据采集模块，通过内窥镜设备采集实时图像。

数据处理模块，通过图像处理模块处理所述实时图像，获取处理图像。将所述实时图像和处理图像输入FPGA模块。所述实时图像连接到所述FPGA模块的下层显示区域。所述处理图像连接到所述FPGA模块的上层显示区域。所述实时图像和处理图像在所述FPGA模块内叠加后通过屏幕输出并显示。

实施例三：

一种减小内窥镜辅助软件显示延时的设备，包括：存储器、处理器。所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器执行如实施例一所述的减小内窥镜辅助软件显示延时的方法。

实施例四：

一种非暂时性机器可读存储介质，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现实施例一中的减小内窥镜辅助软件显示延时的方法。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种减小内窥镜辅助软件显示延时的方法，其特征在于，包括：

通过内窥镜设备采集实时图像；

将所述实时图像输入图像处理模块，获取处理图像；

将所述实时图像和处理图像输入FPGA模块；所述实时图像连接到所述FPGA模块的下层显示区域；所述处理图像连接到所述FPGA模块的上层显示区域；所述实时图像和处理图像在所述FPGA模块内叠加后通过屏幕输出并显示。

2.据权利要求1所述的一种减小内窥镜辅助软件显示延时的方法，其特征在于，所述实时图像从所述内窥镜设备到FPGA模块，再到所述屏幕，采用直通连接。

3.根据权利要求1所述的一种减小内窥镜辅助软件显示延时的方法，其特征在于，所述图像处理模块配有采集卡，所述采集卡和内窥镜设备的图像输出端连接。

4.根据权利要求1所述的一种减小内窥镜辅助软件显示延时的方法，其特征在于，所述图像处理模块采用AI处理技术。

5.根据权利要求1所述的一种减小内窥镜辅助软件显示延时的方法，其特征在于，所述图像处理模块将处理结果和界面元素一起显示，输出分辨率设置为1920*1080。

6.根据权利要求1所述的一种减小内窥镜辅助软件显示延时的方法，其特征在于，所述图像处理模块的输出以特定的像素点表示镜区显示区域。

7.根据权利要求6所述的一种减小内窥镜辅助软件显示延时的方法，其特征在于，所述像素点的数据在UI元素中不存在。

8.根据权利要求7所述的一种减小内窥镜辅助软件显示延时的方法，其特征在于，所述FPGA模块将处理图像中的像素点替换成实时图像的。

9.一种减小内窥镜辅助软件显示延时的***，其特征在于，包括：

数据采集模块，通过内窥镜设备采集实时图像；

数据处理模块，通过图像处理模块处理所述实时图像，获取处理图像；将所述实时图像和处理图像输入FPGA模块；所述实时图像连接到所述FPGA模块的下层显示区域；所述处理图像连接到所述FPGA模块的上层显示区域；所述实时图像和处理图像在所述FPGA模块内叠加后通过屏幕输出并显示。

10.一种减小内窥镜辅助软件显示延时的设备，其特征在于，包括：存储器、处理器；所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器执行如权利要求1到8所述的减小内窥镜辅助软件显示延时的方法。

Images