CN115565479A - 一种多显示屏图像显示方法、装置及存储介质 - Google Patents
一种多显示屏图像显示方法、装置及存储介质 Download PDFInfo
- Publication number
- CN115565479A CN115565479A CN202211145288.2A CN202211145288A CN115565479A CN 115565479 A CN115565479 A CN 115565479A CN 202211145288 A CN202211145288 A CN 202211145288A CN 115565479 A CN115565479 A CN 115565479A
- Authority
- CN
- China
- Prior art keywords
- display
- combinations
- screens
- image
- combination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 68
- 238000013507 mapping Methods 0.000 claims abstract description 63
- 238000012545 processing Methods 0.000 claims abstract description 54
- 230000015654 memory Effects 0.000 claims description 13
- 238000010186 staining Methods 0.000 claims description 12
- 238000001514 detection method Methods 0.000 claims description 8
- 230000011218 segmentation Effects 0.000 claims description 8
- 238000004043 dyeing Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 6
- 238000003384 imaging method Methods 0.000 abstract description 6
- 238000011156 evaluation Methods 0.000 description 26
- 230000003993 interaction Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 6
- 230000004927 fusion Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000012757 fluorescence staining Methods 0.000 description 2
- 238000001727 in vivo Methods 0.000 description 2
- 238000012163 sequencing technique Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000007850 fluorescent dye Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000004393 visual impairment Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2360/00—Aspects of the architecture of display systems
- G09G2360/04—Display device controller operating with a plurality of display units
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2360/00—Aspects of the architecture of display systems
- G09G2360/06—Use of more than one graphics processor to process data before displaying to one or more screens
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Medical Informatics (AREA)
- Biophysics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Human Computer Interaction (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Endoscopes (AREA)
Abstract
本申请公开一种多显示屏图像显示方法、装置及存储介质,涉及内窥镜成像技术领域,用于在多个显示屏上显示更丰富且具有逻辑性的图像信息。该方法包括:确定多个显示组合与多个显示屏之间的映射关系;其中,一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像;功能图像为对内窥镜拍摄的原始图像进行图像处理后得到的图像;映射关系指的是多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系;按照映射关系中多个显示屏的显示等级,分别向多个显示屏发送对应显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。
Description
技术领域
本申请涉及内窥镜成像技术领域,尤其涉及一种多显示屏图像显示方法、装置及存储介质。
背景技术
目前,在医疗内窥镜成像领域,可以通过多个显示屏来显示内窥镜在体内拍摄的图像,以使得医生等用户来检查病人的体内状况。
但是,相关技术中,多个显示屏上仅能显示相同的图像画面,若用户想要同时观看不同的图像画面,则需要分别对多个显示屏进行手动调整,操作起来较为麻烦,给用户带来较差的使用体验,不能满足用户的多样性需求。
发明内容
本申请提供一种多显示屏图像显示方法、装置及存储介质,用于在多个显示屏上显示更丰富且具有逻辑性的图像信息。
第一方面,本申请提供一种多显示屏图像显示方法,应用于多显示屏显示***中的主机,所述多显示屏显示***还包括:内窥镜和多个显示屏;该方法包括:确定多个显示组合与多个显示屏之间的映射关系;其中,一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像;功能图像为对内窥镜拍摄的原始图像进行图像处理后得到的图像;映射关系指的是多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系;按照映射关系中多个显示屏的显示等级,分别向多个显示屏发送对应显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。
可以理解的是,在本申请提供的方法中,首先确定多个显示组合(一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像)与多个显示屏之间的映射关系;其中,该映射关系为多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系;然后根据该映射关系,将多个显示组合与多个显示屏进行逐级匹配,进而分别向多个显示屏中的每一个显示屏发送对应的显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。如此,相比于相关技术中多个显示屏均重复显示单一画面的方法,本申请实施例可以为用户提供更丰富的显示画面;同时,使多个显示组合与多个显示屏按照显示等级逐一对应,达到分级显示的效果,使得多个显示屏上显示的显示组合具有逻辑性和关联性,可以满足用户的多样性需求。
作为一种可能的实现方式,上述确定多个显示组合与多个显示屏之间的映射关系之前,上述方法还包括:对内窥镜拍摄的原始图像进行图像处理,得到功能图像;其中,图像处理包括以下一项或多项:图像染色处理、图像增强处理、目标检测、目标识别和目标分割。
作为另一种可能的实现方式,上述确定多个显示组合与多个显示屏之间的映射关系,包括:确定多个功能图像的显示等级;功能图像的显示等级由功能图像的可视性和/或信息性确定;根据构成每个显示组合的各个功能图像的显示等级,确定多个显示组合中每个显示组合的显示等级;显示组合的显示等级反映了显示组合的重要性;将多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系;显示屏的显示等级由显示屏的位置和显示屏的观看对象确定。
作为另一种可能的实现方式,上述根据构成每个显示组合的各个功能图像的显示等级,确定多个显示组合中每个显示组合的显示等级之后,上述方法还包括:从多个显示组合中,识别出重复的显示组合;重复的显示组合指的是,具有相同的功能图像的显示组合中,显示等级非最高的显示组合;根据重复的显示组合,对多个显示组合的显示等级进行调整;其中,调整后的重复的显示组合的显示等级,均低于调整后的未重复的显示组合的显示等级;上述将多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系,包括:将调整后的多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系。
作为另一种可能的实现方式,上述方法还包括:接收第一触发操作;第一触发操作用于指示多个显示屏中每一个显示屏对应的显示组合进行逐级切换;其中,逐级切换包括:将每一个显示屏对应的显示组合切换为高显示等级的显示组合;或者,将每一个显示屏对应的显示组合切换为低显示等级的显示组合;响应于第一触发操作,将多个显示屏中每一个显示屏对应的显示组合进行逐级切换。
作为另一种可能的实现方式,上述确定多个显示组合与多个显示屏之间的映射关系之前,上述方法还包括:接收第二触发操作,第二触发操作用于指示多个显示屏按照第一显示模式进行显示;在第一显示模式中,多个显示屏包括主显示屏和多个副显示屏;主显示屏用于显示内窥镜拍摄的原始图像;多个副显示屏用于分别显示不同的显示组合;或者,接收第三触发操作;第三触发操作用于指示多个显示屏按照第二显示模式进行显示;在第二显示模式中,多个显示屏中的第一显示屏用于显示内窥镜拍摄的原始图像;多个显示屏中除第一显示屏之外的其他显示屏,用于分别显示不同的显示组合。
第二方面,本申请提供一种多显示屏图像显示装置,应用于多显示屏显示***中的主机,多显示屏显示***还包括内窥镜和多个显示屏;该装置包括:确定模块,用于确定多个显示组合与多个显示屏之间的映射关系;其中,一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像;功能图像为对内窥镜拍摄的原始图像进行图像处理后得到的图像;映射关系指的是多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系;发送模块,用于按照映射关系中多个显示屏的显示等级,分别向多个显示屏发送对应显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。
作为一种可能的实现方式,多显示屏图像显示装置还包括:处理模块,用于对内窥镜拍摄的原始图像进行图像处理,得到功能图像;其中,图像处理包括以下一项或多项:图像染色处理、图像增强处理、目标检测、目标识别和目标分割。
作为另一种可能的实现方式,确定模块,具体用于确定多个功能图像的显示等级;功能图像的显示等级由功能图像的可视性和/或信息性确定;根据构成每个显示组合的各个功能图像的显示等级,确定多个显示组合中每个显示组合的显示等级;显示组合的显示等级反映了显示组合的重要性;将多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系;显示屏的显示等级由显示屏的位置和显示屏的观看对象确定。
作为另一种可能的实现方式,确定模块,还用于从多个显示组合中,识别出重复的显示组合;重复的显示组合指的是,具有相同的功能图像的显示组合中,显示等级非最高的显示组合;根据重复的显示组合,对多个显示组合的显示等级进行调整;其中,调整后的重复的显示组合的显示等级,均低于调整后的未重复的显示组合的显示等级;确定模块,具体用于将调整后的多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系。
作为另一种可能的实现方式,多显示屏图像显示装置还包括:接收模块和切换模块;接收模块,用于接收第一触发操作;第一触发操作用于指示多个显示屏中每一个显示屏对应的显示组合进行逐级切换;其中,逐级切换包括:将每一个显示屏对应的显示组合切换为高显示等级的显示组合;或者,将每一个显示屏对应的显示组合切换为低显示等级的显示组合;切换模块,用于响应于第一触发操作,将多个显示屏中每一个显示屏对应的显示组合进行逐级切换。
作为另一种可能的实现方式,接收模块,还用于接收第二触发操作,第二触发操作用于指示多个显示屏按照第一显示模式进行显示;在第一显示模式中,多个显示屏包括主显示屏和多个副显示屏;主显示屏用于显示内窥镜拍摄的原始图像;多个副显示屏用于分别显示不同的显示组合;或者,接收第三触发操作;第三触发操作用于指示多个显示屏按照第二显示模式进行显示;在第二显示模式中,多个显示屏中的第一显示屏用于显示内窥镜拍摄的原始图像;多个显示屏中除第一显示屏之外的其他显示屏,用于分别显示不同的显示组合。
第三方面,本申请提供一种多显示屏图像显示装置,包括:一个或多个处理器;一个或多个存储器;其中,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,多显示屏图像显示装置执行上述第一方面所提供的任一种多显示屏图像显示方法。
第四方面,本申请提供一种计算机可读存储介质,计算机可读存储介质存储有计算机执行指令,当计算机执行指令在计算机上运行时,使得计算机执行上述第一方面所提供的任一种多显示屏图像显示方法。
本申请中第二方面至第四方面的描述,可以参考第一方面的详细描述;并且,第二方面至第四方面的描述的有益效果,可以参考第一方面的有益效果分析,此处不再赘述。
附图说明
图1为本申请实施例提供的一种多显示屏显示***的结构示意图;
图2为本申请实施例提供的一种多显示屏图像显示方法的流程图一;
图3为本申请实施例提供的一种多显示屏图像显示方法的流程图二;
图4为本申请实施例提供的一种人员站位示意图;
图5为本申请实施例提供的一种主机的界面示意图一;
图6为本申请实施例提供的一种显示装置的显示模式示意图一;
图7为本申请实施例提供的一种主机的界面示意图二;
图8为本申请实施例提供的一种显示装置的显示模式示意图二;
图9为本申请实施例提供的一种主机的界面示意图三;
图10为本申请实施例提供的一种显示等级切换的示意图一;
图11为本申请实施例提供的一种显示等级切换的示意图二;
图12为本申请实施例提供的一种多显示屏图像显示装置的的结构示意图一;
图13为本申请实施例提供的一种多显示屏图像显示装置的的结构示意图二。
具体实施方式
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
本申请的说明书以及附图中的术语“第一”和“第二”等是用于区别不同的对象,或者用于区别对同一对象的不同处理,而不是用于描述对象的特定顺序。
此外,本申请的描述中所提到的术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元,而是可选的还包括其他没有列出的步骤或单元,或可选的还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本申请的描述中,除非另有说明,“多个”的含义是指两个或两个以上。例如,多个显示组合的含义是指两个或两个以上的显示组合。
如背景技术所述,目前,在医疗内窥镜成像领域,可以通过多个显示屏来显示内窥镜在体内拍摄的图像,以使得医生等用户来检查病人的体内状况。
但是,相关技术中,多个显示屏上仅能显示相同的图像画面,若用户想要同时观看不同的图像画面,则需要分别对多个显示屏进行手动调整,操作起来较为麻烦,给用户带来较差的使用体验,不能满足用户的多样性需求。
针对上述技术问题,本申请实施例提供了一种多显示屏图像显示方法,其思路在于:确定多个显示组合(一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像)与多个显示屏之间的映射关系;其中,该映射关系为多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系;根据该映射关系,将多个显示组合与多个显示屏进行逐级匹配,进而分别向多个显示屏中的每一个显示屏发送对应的显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。如此,相比于相关技术中多个显示屏均重复显示单一画面的方法,本申请实施例可以为用户提供更丰富的显示画面;同时,使多个显示组合与多个显示屏按照显示等级逐一对应,达到分级显示的效果,使得多个显示屏上显示的显示组合具有逻辑性和关联性,可以满足用户的多样性需求。
下面结合说明书附图,对本申请提供的实施例进行具体介绍。
请参考图1,其示出本申请实施例提供的一种多显示屏显示***。如图1所示,该多显示屏显示***100可以包括:内窥镜110、主机120和显示装置130。
其中,内窥镜110,用于经生物体的天然孔道导入生物体内部,以拍摄生物体内部的图像信息。
在一些实施例中,内窥镜110可以与光源装置(图1中未示出)相连,该光源装置用于发出照明光,以便内窥镜110拍摄出清晰的图像。可选地,可以发出白光,以进行可见光成像。
主机120,也称为摄像***主机,用于接收内窥镜110的发送的图像,并对该图像进行处理,将处理后的图像发送给显示装置130。可选地,主机120还用于控制内窥镜110将所采集的图像发送给主机120;主机120还用于控制光源装置开启或关闭光源等。应理解,主机120可以根据指令操作码和时序信号,产生操作控制信号,指示实施环境中的其他装置执行控制指令。此外,主机120本身具有图像处理功能,或者,主机120与其他具有图像处理的装置集成在一起。
可以理解的是,图1中所示的主机120仅为示例,本申请对主机120的具体存在形式不作限制。示例性地,主机120可以为服务器;或者,主机120可以为中央处理器(centralprocessing unit,CPU)、图像处理单元(Graphics Processing Unit,GPU)、通用处理器网络处理器(network processor,NP)、数字信号处理器(digital signal processing,DSP)、微处理器、微控制器、可编程逻辑器件(programmable logic device,PLD)或它们的任意组合。主机120还可以是其它具有处理功能的装置,例如电路、器件或软件模块,本申请对此不做任何限制。
显示装置130用于接收主机120发送的处理后的图像信息,并将处理后的图像信息显示在显示装置130上。
在一些实施例中,显示装置130包括一个或多个显示屏。示例性的,如图1所示,显示装置130可以包括:显示屏1,……,显示屏n,其中,n为大于1的整数。
可选的,多个显示屏的型号、尺寸、显示参数等可能不相同。本申请实施例对显示装置130的具体类型,尺寸大小和分辨率等不作具体限定。
示例性的,显示装置130可以是液晶显示器、有机发光二极管(organic light-emitting diode,OLED)显示器等。
下面对本申请实施例提供的一种多显示屏图像显示方法进行具体介绍。
本申请实施例提供的图像分级显示的方法,应用于多显示屏显示***,多显示屏显示***包括:多个显示屏(例如,如图1中所示的显示装置130)和主机(例如,如图1中所示的主机120)。
可选的,本申请实施例提供的方法,可以由主机来执行。如图2所示,该方法包括以下步骤:
S101、确定多个显示组合与多个显示屏之间的映射关系。
其中,一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像。该功能图像为对内窥镜拍摄的原始图像进行图像处理后得到的图像。
在一些实施例中,在执行上述步骤S101之前,该方法还包括:对内窥镜拍摄的原始图像进行图像处理,得到功能图像。其中,图像处理包括但不限于:图像染色处理、图像增强处理和智能图像处理(目标检测、目标识别和目标分割)等。
示例性的,对内窥镜拍摄的原始图像进行智能图像处理,得到包含智能信息的功能图像。其中,上述智能图像处理包括:目标分割、目标识别、目标检测等。例如,对内窥镜拍摄的原始图像进行车辆识别,识别出原始图像中的车辆,并采用目标框表示车辆所在的位置。
又一示例性的,对内窥镜拍摄的原始图像进行图像染色处理,得到染色后的功能图像。其中,上述图像染色处理包括:荧光染色、光谱染色、电子染色等。例如,对内窥镜拍摄的原始图像进行荧光染色处理包括:获取原始图像的荧光图像,根据荧光图像中每个像素点的荧光浓度,确定每个像素点的染色深度值(例如,染色深度值可以与荧光浓度成正比),进而根据每个像素点的染色深度值,对原始图像中的每个像素点进行染色,得到荧光染色的功能图像。
又一示例性的,对内窥镜拍摄的原始图像进行图像增强处理,得到增强后的功能图像。其中,上述图像增强处理包括:清晰度增强、亮度增强等。例如,对内窥镜拍摄的原始图像进行亮度增强处理包括:对原始图像的每个像素点的亮度分量进行增强,得到亮度增强后的功能图像。
可以理解的是,本申请实施例提供的方法,可以对内窥镜拍摄的原始图像进行不同的图像处理,得到多个功能图像,以满足用户的不同需求。
在一些实施例中,本申请实施例提供的方法还包括:确定显示组合。可选的,将多个功能图像中能够融合显示的功能图像作为一个显示组合,将不能够融合显示的功能图像单独作为一个显示组合。
其中,能够融合显示的功能图像指的是,进行图像融合后得到的融合图像,不影响各个功能图像各自的显示效果。
示例性的,假设多张功能图像为N张,则理论上有个显示组合,假设有4种功能图像,则理论上有种;剔除不能融合的显示组合,得到T个显示组合。其中,不能融合的显示组合为融合后影响各自的功能效果的显示组合,例如,非同一数据流产生的显示组合不能融合(例如单路荧光图像与可见光图像两路数据流不能进行融合)。
在一些实施例中,上述映射关系指的是多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系。可选的,如图3所示,上述步骤S101具体可以实现以下步骤:
S1011、确定多个功能图像的显示等级。
可选的,功能图像的显示等级由功能图像的可视性和/或信息性确定。可视性反映了该功能图像的视觉效果;信息性反映了该功能图像所包含的信息量。例如,功能图像的视觉效果越好,该功能图像的显示等级越高;和/或,功能图像所包含的信息量越多,该功能图像的显示等级越高。
在一些实施例中,确定多个功能图像的显示等级可以实现为以下步骤:
步骤a1、按照预设评价规则,对多张功能图像进行评分,得到每张功能图像的评分。
其中,预设评价规则,用于对功能图像的可视性、信息性或重要性中的一项或多项进行评价。
在一些实施例中,上述预设评价规则包括一个或多个评价指标,例如:可视性评价指标,和/或,信息性评价指标等。
其中,可视性评价指标为对功能图像的可视性(功能图像的可观看程度以及视觉效果)进行评价的指标。可以理解的是,功能图像的视觉损失的信息越少、越接近原始图像,说明该功能图像的可视性越好。例如,一些功能图像需要在原始图像上叠框显示,那目标框就会影响图像的可视性;又例如,一些功能图像为将原始图像转变为其它颜色域的图像,进而凸显部分信息,这样也会降低该功能图像的可视性。
示例性的,采用可视性评价指标对功能图像进行评价的方式可以满足以下公式(1):
SSIM(x,y)=((2μ_x·μ_y+c_1)(σ_xy+c_2))/((μ_x2+μ_y2+c_1)(σ_x2+σ_y2+c_2))公式(1)
其中,x表示原始图像,y表示功能图像,μ_x表示原始图像中每个像素点的GRB通道的颜色分量的平均值,μ_y表示功能图像中每个像素点的GRB通道的颜色分量的平均值,σ_x表示原始图像中每个像素点的RGB通道的颜色分量的标准差,σ_y表示功能图像中每个像素点的RGB通道的颜色分量的标准差,σ_xy为协方差,c_1和c_2均为常数(用于避免分母为0,保证分数的有效性)。
信息性评价指标为对功能图像的信息性(功能图像提供的额外信息量的程度)进行评价的指标。通常,功能图像提供的额外信息量越多,该功能图像的信息量评分越高。
示例性的,采用信息性评价指标对功能图像进行评价包括:根据功能图像的类型确定功能图像所提供的信息量的评分。例如,智能信息类(包括目标识别、目标分割、目标检测等)每项3分,图像染色类(包括荧光染色、光谱染色、电子染色等)每项2分,图像增强类(清晰度增强、亮度增强等)每项1分,其他类别每项0.5分。
其中,功能图像的类别根据图像处理时所对应的属性标志位确定。例如,智能信息类处理所对应的属性标志位为1,图像染色类处理所对应的标志位为2,图像增强类处理所对应的标志位为3。因此,通过图像处理得到功能图像时,根据图像处理类别所对应的属性标志位,即可确定功能图像的类别。
在一些实施例中,预设评价规则还可以包括:重要性评价指标。重要性评价指标为对功能图像的重要性进行评价的指标。其中,功能图像的重要性由功能图像的可视性和信息性决定,即重要性(S)=可视性(V)+信息性(I)。
示例性,采用重要性评价指标对功能图像的重要性进行评价可以满足以下公式(2):
Si=αi*Vi+βi*Ii 公式(2)
其中,αi和βi为调制权重。
可以理解的是,在对一种功能图像的可视性和信息性均有要求的情况下,通过对功能图像的重要性进行评价的规则,来确定功能图像的重要性程度。例如,在用户对功能图像的可视性的重视程度更高的情况下,则提高可视性的权重αi,来提高可视性好的功能图像的重要性评分;又例如,在用户对功能图像的信息性的重视程度更高的情况下,则提高信息性的权重βi,来信息性高的功能图像的重要性评分。
在一些实施例中,对于多张功能图像中的每一张功能图像来说,按照预设评价规则,确定每一张功能图像的每一个评价指标的得分,将每一个评价指标的得分之和,作为该功能图像的评分。
示例性的,假设预设评价规则包括:可视性评价指标、信息性评价指标和重要性评价指标;假设功能图像1的可视性评价指标的得分为2分,信息性评价指标的得分为3分,重要性评价指标为3分,则功能图像1的评分为8分。
步骤a2、对每张功能图像的评分进行排序,得到多张功能图像的显示等级。
在一些实施例中,按照从高到底的顺序,对每张功能图像的评分进行排序,得到多张功能图像的显示等级。其中,评分高的功能图像对应的显示等级高,评分低的功能图像对应的显示等级低。
示例性的,假设多张功能图像包括:功能图像1、功能图像2、功能图像3和功能图像4;其中,功能图像1的评分为5分、功能图像2的评分为8分、功能图像3的评分为9分、功能图像4的评分为6分,则功能图像的评分与该功能图像对应的显示等级可以为表1所示的形式:
表1
功能图像 | 评分 | 排序 | 显示等级 |
功能图像1 | 5 | 4 | 四级图像 |
功能图像2 | 8 | 2 | 二级图像 |
功能图像3 | 9 | 1 | 一级图像 |
功能图像4 | 6 | 3 | 三级图像 |
可以理解的是,本申请实施例采用预设评价规则对多张功能图像的图像质量进行评分,进而根据评分确定多张功能图像的显示等级,如此,通过分级的方式使多张功能图像有序排列,提高参考效果。
S1012、根据构成每个显示组合的各个功能图像的显示等级,确定多个显示组合中每个显示组合的显示等级。
其中,显示组合的显示等级反映了显示组合的重要性。
在一些实施例中,根据构成每个显示组合的各个功能图像的评分,确定每个显示组合的评分,进而根据多个显示组合中每个显示组合的评分,确定多个显示组合的显示等级。
示例性的,假设多个显示组合包括:显示组合1、显示组合2、显示组合3、显示组合4、显示组合5和显示组合6。其中,显示组合1包括功能图像1(评分为5);显示组合2包括功能图像2(评分为8);显示组合3包括功能图像3(评分为9);显示组合4包括功能图像4(评分为6);显示组合5包括功能图像2(评分为8)和功能图像3(评分为9);显示组合6包括功能图像3(评分为9)和功能图像4(评分为6)。则多个显示组合的评分和显示等级满足以下表2:
表2
可以理解的是,本申请实施例根据构成每个显示组合的各个功能图像的显示等级,确定多个显示组合中每个显示组合的显示等级,如此,通过分级的方式使多个显示组合有序排列,具有逻辑性和关联性,提高参考效果。
在一些实施例中,在步骤S1012之后,上述方法还包括:
步骤b1、从多个显示组合中,识别出重复的显示组合。
其中,重复的显示组合指的是,具有相同的功能图像的显示组合中,显示等级非最高的显示组合。
示例性的,假设显示组合2包括:功能图像2(评分为8);显示组合5包括功能图像2(评分为8)和功能图像3(评分为9),则可以看出显示组合5的显示等级高于显示组合2的显示等级,且显示组合2和显示组合5具有相同的功能图像2,则显示组合2为重复的显示组合。
步骤b2、根据重复的显示组合,对多个显示组合的显示等级进行调整。
其中,调整后的重复的显示组合的显示等级,均低于调整后的未重复的显示组合的显示等级。
在一些实施例中,将调整前多个显示组合的显示等级称为初始显示等级,调整后多个显示组合的显示等级称为目标显示等级。则上述步骤b2可以实现为:首先,将未重复的显示组合按照初始显示等级进行排序,得到未重复的显示组合的目标显示等级;之后,将重复的显示组合按照初始显示等级进行排序,排列在未重复的显示组合之后,得到重复的显示组合的目标显示等级。
示例性的,在上述表2所示的多个显示组合中,显示组合2和显示组合5均包括功能图像2,且显示组合5的显示等级较高,因此显示组合2为重复的显示组合;显示组合3和显示组合5均包括功能图像3,且显示组合5的显示等级较高,因此显示组合3为重复的显示组合;显示组合6和显示组合5均包括功能图像3,且显示组合5的显示等级较高,因此显示组合6为重复的显示组合;则根据重复的显示组合,对多个显示组合的显示等级进行调整,则调整后多个显示组合的评分和显示等级满足以下表3:
表3
其中,如表3所示,调整后的未重复的显示组合1、显示组合4和显示组合5的显示等级,均高于调整后重复的显示组合2、显示组合3和显示组合6的显示等级。
可以理解的是,显示组合是由多个功能图像进行图像融合得到的,由于多个功能图像的融合方式具有多种,因此,多个显示组合中难免存在重复的显示组合。若仅根据构成每个显示组合的各个功能图像的显示等级,确定多个显示组合的显示等级,则可能会出现重复的显示组合显示在等级高的显示屏上,造成显示资源的浪费。因此,本申请实施例在确定多个显示组合的显示等级之后,还可以根据多个显示组合中重复的显示组合,对多个显示组合的显示等级进行调整,以确保调整后未重复的显示组合的显示等级,均高于调整后重复的显示组合的显示等级,能够满足用户的多样性需求,为用户提供更丰富的图像信息,提高用户的使用体验。
S1013、将多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系。
在一些实施例中,在上述方法包括:根据重复的显示组合,对多个显示组合的显示等级进行调整的情况下,上述步骤S1013还可以实现为:将调整后的多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系。
其中,显示屏的显示等级由显示屏的位置和显示屏的观看对象确定。示例性的,假设多显示屏显示***的主要观看对象为对象A,则在确定多个显示屏的显示等级时,要首选满足对象A的观看需求,即对象A观看的显示屏的显示等级较高,对象A观看的显示屏中视觉效果越好的显示屏,显示等级越高。
可以理解的是,以手术的场景为例,在手术室中可以设置多台显示屏,以满足手术室中不同用户的观看需求,例如,如图4所示,手术室中,主刀医生和助手的站位不同,为使每个用户都能够看到内窥镜拍摄的画面,设置了显示屏1、显示屏2和显示屏3。若假设多显示屏显示***的主要观看对象为主刀医师,则在设置多显示屏的显示等级时,首先满足主刀医生的观看需求。其中,主刀医生观看的显示屏为显示屏1和显示屏2,且显示屏1的视觉效果较好,因此,显示屏1的显示等级高于显示屏2的显示等级,显示屏2的显示等级高于显示屏3的显示等级。
示例性的,假设多个显示组合包括:显示组合1、显示组合2、显示组合3、显示组合4、显示组合5和显示组合6;其中,多个显示组合的显示等级如表3所示。假设多个显示屏包括(按照显示等级降序排列):显示屏1、显示屏2、显示屏3、显示屏4、显示屏5、显示屏6和显示屏7,其中,显示屏1用于显示原始图像,则多个显示组合与多个显示屏之间的映射关系可以为:将多个显示组合的按照显示等级由高到低,分别匹配对应显示等级的显示屏。示例性的,多个显示组合与多个显示屏之间的映射关系可以满足以下表4:
表4
显示组合 | 显示等级 | 对应的显示屏 |
显示组合1 | 三级 | 显示屏4 |
显示组合2 | 六级 | 显示屏7 |
显示组合3 | 五级 | 显示屏6 |
显示组合4 | 二级 | 显示屏3 |
显示组合5 | 一级 | 显示屏2 |
显示组合6 | 四级 | 显示屏5 |
可以理解的是,本申请实施例提供的方法,分别确定显示组合的显示等级和显示屏的显示等级,进而通过逐级匹配的方式,使显示等级高的显示组合显示在显示等级高的显示屏上。如此,一方面,使得多个显示屏可以分别显示不同的显示组合,为用户提供更丰富的图像信息;另一方面,多个显示组合逐级有序排列,使得多个显示屏上显示的图像具有逻辑性和关联性,提高参考效果。
在一些实施例中,上述方法还包括:在上述步骤S101之前,该方法还包括:设置多个显示屏的显示模式。示例性的,设置多个显示屏的显示模式包括以下两种方式。
作为一种可能的实现方式,接收第二触发操作;响应于第二触发操作,将多个显示屏的显示模式设置为第一显示模式。
其中,第二触发操作用于指示多个显示屏按照第一显示模式进行显示。示例性的,主机(也即摄像***主机)包括人机交互模块(例如显示屏和输入设备,或者触摸屏等),主机可以通过人机交互模块接收用户发出的第二触发操作。可选的,上述第二触发操作可以为触屏操作(在人机交互模块为触摸屏的情况下);或者,第二触发操作可以为按键操作(在人机交互模块的输入设备为按键的情况下);或者,第二触发操作可以为遥控操作(在人机交互模块的输入设备为遥控器的情况下)等,本申请实施例对此不作限定。例如,以主机的人机交互模块为触摸屏为例,人机交互模块可以显示如图5所示的设置显示模式的界面,用户通过触屏操作来指示多个显示屏按照第一显示模式进行显示。
示例性的,如图6所示,在第一显示模式中,多个显示屏包括主显示屏和多个副显示屏;主显示屏用于显示内窥镜拍摄的原始图像;多个副显示屏用于分别显示不同的显示组合(具体的,多个副显示屏用于分别显示不同显示等级的显示组合)。
作为另一种可能的实现方式,接收第三触发操作;响应于第三触发操作,将多个显示屏的显示模式设置为第二显示模式。
其中,第三触发操作用于指示多个显示屏按照第二显示模式进行显示。示例性的,以主机的人机交互模块为触摸屏为例,人机交互模块可以显示如图7所示的设置显示模式的界面,用户通过触屏操作来指示多个显示屏按照第二显示模式进行显示。
示例性的,如图8所示,在第二显示模式中,多个显示屏中的第一显示屏(第一显示屏可以为多个显示屏中的任意一个显示屏,例如显示屏1)用于显示内窥镜拍摄的原始图像;多个显示屏中除第一显示屏(例如显示屏1)之外的其他显示屏,用于分别显示不同的显示组合(具体的,多个显示屏中除第一显示屏之外的其他显示屏,用于分别显示不同显示等级的显示组合)。
可以理解的是,为满足用户的使用需求,本申请实施例提供了两种显示模式,其中,在用户对原始图像有固定需求(即以原始图像为主,其他显示组合为辅)的情况下,可以选择显示模式一;在用户对多个显示组合有需求(即需要同时观看多个组合)的情况下,可以选择显示模式二。如此,基于本申请实施例提供的方法,用户可以根据实际需求,选择相应的显示模式,满足用户的使用需求。
S102、按照映射关系中多个显示屏的显示等级,分别向多个显示屏发送对应显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。
示例性的,假设多个显示组合与多个显示屏之间的映射关系为表4所示的形式,则将显示组合1在显示屏4上进行显示,显示组合2在显示屏7上进行显示,显示组合3在显示屏6上进行显示,显示组合4在显示屏3上进行显示,显示组合5在显示屏2上进行显示,显示组合6在显示屏5上进行显示。其中,显示屏1为主屏,原始图像在显示屏1上进行显示。
在一些实施例中,上述方法还包括:根据接收到的切换指令,对多个显示屏上显示的显示组合进行逐级切换。示例性的,可以实现为以下步骤:
步骤c1、接收第一触发操作。
其中,第一触发操作用于指示多个显示屏中每一个显示屏对应的显示组合进行逐级切换。上述第一触发操作由用户通过主机向多个显示屏发出。可以选的,第一触发操作可以由用户通过主机的输入设备(例如,键盘、遥控器等)发出;或者,第一触发操作可以由用户通过语音控制发出;或者,第一触发操作可以由用户通过手势控制发出。本申请实施例对第一触发操作的形式不作具体限制。
示例性的,以主机的人机交互模块为触摸屏为例,人机交互模块可以显示如图9所示的显示组合切换界面,则用户可以通过触屏操作来指示多个显示屏对应的显示组合进行逐级切换。
可选的,逐级切换包括:将多个显示屏中每一个显示屏对应的显示组合切换为高显示等级的显示组合;或者,将多个显示屏中每一个显示屏对应的显示组合切换为低显示等级的显示组合。
步骤c2、响应于第一触发操作,将多个显示屏中每一个显示屏对应的显示组合进行逐级切换。
在一些实施例中,在多个显示屏的显示模式为第一显示模式的情况下,响应于第一触发操作,多个显示屏中的主显示屏上显示的原始图像不改变,多个显示屏中的副显示屏上显示的显示组合,按照显示等级进行逐级切换;在多个显示屏的显示模式为第二显示模式的情况下,响应于第一触发操作,多个显示屏上显示的显示组合,按照显示等级进行逐级切换。
示例性的,如图10所示,在多个显示屏的显示模式为第一显示模式的情况下,响应于第一触发操作,副屏1由一级显示组合切换为二级显示组合、副屏2由二级显示组合切换为三级显示组合、……、副屏M由M级显示组合切换为一级显示组合。
又一示例性的,如图11所示,在多个显示屏的显示模式为第二显示模式的情况下,响应于第一触发操作,显示屏1由原始图像切换为M级显示组合、显示屏2由一级显示组合切换为原始图像、显示屏3由二级显示组合切换为一级显示组合、……、环屏M+1由M级显示组合切换为M-1级显示组合。
可以理解的是,在用户需要观看其他显示等级的显示组合时,可以发出第一触发操作,指示多个显示屏上显示的显示组合进行逐级切换。由于多个显示组合按照显示等级逐级排列,则用户在切换时,可以快速的切换的想要的显示组合,例如,假设用户观看的显示屏包括:显示屏1和显示屏2,其中,显示屏1上的显示组合为一级,显示屏2上显示的显示组合为二级;当用户需要观看三级和四级的显示组合时,仅需进行两次逐级切换,能够快速满足用户的使用需求。
基于本申请实施例提供的方法,至少可以产生以下有益效果:确定多个显示组合(一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像)与多个显示屏之间的映射关系;其中,该映射关系为多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系;根据该映射关系,将多个显示组合与多个显示屏进行逐级匹配,进而分别向多个显示屏中的每一个显示屏发送对应的显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。如此,相比于相关技术中多个显示屏均重复显示单一画面的方法,本申请实施例可以为用户提供更丰富的显示画面;同时,使多个显示组合与多个显示屏按照显示等级逐一对应,达到分级显示的效果,使得多个显示屏上显示的显示组合具有逻辑性和关联性,可以满足用户的多样性需求。
如图12所示,本申请实施例提供了一种多显示屏图像显示装置,用于执行如图2所示的多显示屏图像显示方法。该多显示屏图像显示装置300包括:确定模块301和发送模块302。在另一些实施例中,多显示屏图像显示装置300还包括:处理模块303、接收模块304和切换模块305。
确定模块301,用于确定多个显示组合与多个显示屏之间的映射关系;其中,一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像;功能图像为对内窥镜拍摄的原始图像进行图像处理后得到的图像;映射关系指的是多个显示组合的显示等级与多个显示屏的显示等级之间的映射关系。
发送模块302,用于按照映射关系中多个显示屏的显示等级,分别向多个显示屏发送对应显示等级的显示组合,以使得多个显示屏分别显示不同显示等级的显示组合。
作为一种可能的实现方式,处理模块303,用于对内窥镜拍摄的原始图像进行图像处理,得到功能图像;其中,图像处理包括以下一项或多项:图像染色处理、图像增强处理、目标检测、目标识别和目标分割。
作为另一种可能的实现方式,确定模块301,具体用于确定多个功能图像的显示等级;功能图像的显示等级由功能图像的可视性和/或信息性确定;根据构成每个显示组合的各个功能图像的显示等级,确定多个显示组合中每个显示组合的显示等级;显示组合的显示等级反映了显示组合的重要性;将多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系;显示屏的显示等级由显示屏的位置和显示屏的观看对象确定。
作为另一种可能的实现方式,确定模块301,还用于从多个显示组合中,识别出重复的显示组合;重复的显示组合指的是,具有相同的功能图像的显示组合中,显示等级非最高的显示组合;根据所述重复的显示组合,对所述多个显示组合的显示等级进行调整;其中,调整后的所述重复的显示组合的显示等级,均低于调整后的未重复的显示组合的显示等级;确定模块301,具体用于将调整后的多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到映射关系。
作为另一种可能的实现方式,接收模块304,用于接收第一触发操作;第一触发操作用于指示多个显示屏中每一个显示屏对应的显示组合进行逐级切换;其中,逐级切换包括:将每一个显示屏对应的显示组合切换为高显示等级的显示组合;或者,将每一个显示屏对应的显示组合切换为低显示等级的显示组合;切换模块305,用于响应于第一触发操作,将多个显示屏中每一个显示屏对应的显示组合进行逐级切换。
作为另一种可能的实现方式,接收模块304,还用于接收第二触发操作,第二触发操作用于指示多个显示屏按照第一显示模式进行显示;在第一显示模式中,多个显示屏包括主显示屏和多个副显示屏;主显示屏用于显示内窥镜拍摄的原始图像;多个副显示屏用于分别显示不同的显示组合;或者,接收第三触发操作;第三触发操作用于指示多个显示屏按照第二显示模式进行显示;在第二显示模式中,多个显示屏中的第一显示屏用于显示内窥镜拍摄的原始图像;多个显示屏中除第一显示屏之外的其他显示屏,用于分别显示不同的显示组合。
在采用硬件的形式实现上述集成的模块的功能的情况下,本申请实施例提供了上述实施例中所涉及的多显示屏图像显示装置的另一种可能的结构示意图。如图13所示,该多显示屏图像显示装置400包括:处理器402,通信接口403,总线404。可选的,该多显示屏图像显示装置400还可以包括存储器401。
处理器402,可以是实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。该处理器402可以是中央处理器,通用处理器,数字信号处理器,专用集成电路,现场可编程门阵列或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器402也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等。
通信接口403,用于与其他设备通过通信网络连接。该通信网络可以是以太网,无线接入网,无线局域网(wireless local area networks,WLAN)等。
存储器401,可以是只读存储器(read-only memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(random access memory,RAM)或者可存储信息和指令的其他类型的动态存储设备,也可以是电可擦可编程只读存储器(electrically erasable programmable read-only memory,EEPROM)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。
作为一种可能的实现方式,存储器401可以独立于处理器402存在,存储器401可以通过总线404与处理器402相连接,用于存储指令或者程序代码。处理器402调用并执行存储器401中存储的指令或程序代码时,能够实现本申请实施例提供的多显示屏图像显示方法。
另一种可能的实现方式中,存储器401也可以和处理器402集成在一起。
总线404,可以是扩展工业标准结构(extended industry standardarchitecture,EISA)总线等。总线404可以分为地址总线、数据总线、控制总线等。为便于表示,图13中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将多显示屏图像显示装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
本申请实施例还提供了一种计算机可读存储介质。上述方法实施例中的全部或者部分流程可以由计算机指令来指示相关的硬件完成,该程序可存储于上述计算机可读存储介质中,该程序在执行时,可包括如上述各方法实施例的流程。计算机可读存储介质可以是前述任一实施例的或内存。上述计算机可读存储介质也可以是上述多显示屏图像显示装置的外部存储设备,例如上述多显示屏图像显示装置上配备的插接式硬盘,智能存储卡(smart media card,SMC),安全数字(secure digital,SD)卡,闪存卡(flash card)等。进一步地,上述计算机可读存储介质还可以既包括上述多显示屏图像显示装置的内部存储单元也包括外部存储设备。上述计算机可读存储介质用于存储上述计算机程序以及上述多显示屏图像显示装置所需的其他程序和数据。上述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本申请实施例还提供一种计算机程序产品,该计算机产品包含计算机程序,当该计算机程序产品在计算机上运行时,使得该计算机执行上述实施例中所提供的任一项多显示屏图像显示方法。
尽管在此结合各实施例对本申请进行了描述,然而,在实施所要求保护的本申请过程中,本领域技术人员通过查看附图、公开内容、以及所附权利要求书,可理解并实现公开实施例的其他变化。在权利要求中,“包括”(Comprising)一词不排除其他组成部分或步骤,“一”或“一个”不排除多个的情况。单个处理器或其他单元可以实现权利要求中列举的若干项功能。相互不同的从属权利要求中记载了某些措施,但这并不表示这些措施不能组合起来产生良好的效果。
尽管结合具体特征及其实施例对本申请进行了描述,显而易见的,在不脱离本申请的精神和范围的情况下,可对其进行各种修改和组合。相应地,本说明书和附图仅仅是所附权利要求所界定的本申请的示例性说明,且视为已覆盖本申请范围内的任意和所有修改、变化、组合或等同物。显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
以上,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应该以权利要求的保护范围为准。
Claims (10)
1.一种多显示屏图像显示方法,其特征在于,应用于多显示屏显示***中的主机,所述多显示屏显示***还包括:内窥镜和多个显示屏;所述方法包括:
确定多个显示组合与所述多个显示屏之间的映射关系;其中,一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像;所述功能图像为对所述内窥镜拍摄的原始图像进行图像处理后得到的图像;所述映射关系指的是所述多个显示组合的显示等级与所述多个显示屏的显示等级之间的映射关系;
按照所述映射关系中所述多个显示屏的显示等级,分别向所述多个显示屏发送对应显示等级的显示组合,以使得所述多个显示屏分别显示不同显示等级的显示组合。
2.根据权利要求1所述的方法,其特征在于,确定多个显示组合与所述多个显示屏之间的映射关系之前,所述方法还包括:
对所述内窥镜拍摄的原始图像进行图像处理,得到功能图像;其中,所述图像处理包括以下一项或多项:图像染色处理、图像增强处理、目标检测、目标识别和目标分割。
3.根据权利要求1所述的方法,其特征在于,所述确定多个显示组合与所述多个显示屏之间的映射关系,包括:
确定多个功能图像的显示等级;所述功能图像的显示等级由所述功能图像的可视性和/或信息性确定;
根据构成每个显示组合的各个功能图像的显示等级,确定所述多个显示组合中每个显示组合的显示等级;所述显示组合的显示等级反映了所述显示组合的重要性;
将所述多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到所述映射关系;所述显示屏的显示等级由所述显示屏的位置和所述显示屏的观看对象确定。
4.根据权利要求3所述的方法,其特征在于,所述根据构成每个显示组合的各个功能图像的显示等级,确定所述多个显示组合中每个显示组合的显示等级之后,所述方法还包括:
从所述多个显示组合中,识别出重复的显示组合;所述重复的显示组合指的是,具有相同的功能图像的显示组合中,显示等级非最高的显示组合;
根据所述重复的显示组合,对所述多个显示组合的显示等级进行调整;其中,调整后的所述重复的显示组合的显示等级,均低于调整后的未重复的显示组合的显示等级;
所述将所述多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到所述映射关系,包括:
将调整后的所述多个显示组合中每一个显示组合的显示等级,与所述多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到所述映射关系。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收第一触发操作;所述第一触发操作用于指示所述多个显示屏中每一个显示屏对应的显示组合进行逐级切换;其中,所述逐级切换包括:将所述每一个显示屏对应的显示组合切换为高显示等级的显示组合;或者,将所述每一个显示屏对应的显示组合切换为低显示等级的显示组合;
响应于所述第一触发操作,将所述多个显示屏中每一个显示屏对应的显示组合进行逐级切换。
6.根据权利要求1所述的方法,其特征在于,所述确定多个显示组合与所述多个显示屏之间的映射关系之前,所述方法还包括:
接收第二触发操作,所述第二触发操作用于指示所述多个显示屏按照第一显示模式进行显示;在所述第一显示模式中,所述多个显示屏包括主显示屏和多个副显示屏;所述主显示屏用于显示所述内窥镜拍摄的原始图像;所述多个副显示屏用于分别显示不同的显示组合;
或者,接收第三触发操作;所述第三触发操作用于指示所述多个显示屏按照第二显示模式进行显示;在所述第二显示模式中,所述多个显示屏中的第一显示屏用于显示所述内窥镜拍摄的原始图像;所述多个显示屏中除所述第一显示屏之外的其他显示屏,用于分别显示不同的显示组合。
7.一种多显示屏图像显示装置,其特征在于,应用于多显示屏显示***中的主机,所述多显示屏显示***还包括内窥镜和多个显示屏;所述装置包括:
确定模块,用于确定多个显示组合与所述多个显示屏之间的映射关系;其中,一个显示组合包括一个功能图像;或者,一个显示组合包括多个功能图像融合后的图像;所述功能图像为对所述内窥镜拍摄的原始图像进行图像处理后得到的图像;所述映射关系指的是所述多个显示组合的显示等级与所述多个显示屏的显示等级之间的映射关系;
发送模块,用于按照所述映射关系中所述多个显示屏的显示等级,分别向所述多个显示屏发送对应显示等级的显示组合,以使得所述多个显示屏分别显示不同显示等级的显示组合。
8.根据权利要求7所述的装置,其特征在于,
所述装置还包括:处理模块,用于对所述内窥镜拍摄的原始图像进行图像处理,得到功能图像;其中,所述图像处理包括以下一项或多项:图像染色处理、图像增强处理、目标检测、目标识别和目标分割;
所述确定模块,具体用于确定多个功能图像的显示等级;所述功能图像的显示等级由所述功能图像的可视性和/或信息性确定;根据构成每个显示组合的各个功能图像的显示等级,确定所述多个显示组合中每个显示组合的显示等级;所述显示组合的显示等级反映了所述显示组合的重要性;将所述多个显示组合中每一个显示组合的显示等级,与多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到所述映射关系;所述显示屏的显示等级由所述显示屏的位置和所述显示屏的观看对象确定;
所述确定模块,还用于从所述多个显示组合中,识别出重复的显示组合;所述重复的显示组合指的是,具有相同的功能图像的显示组合中,显示等级非最高的显示组合;根据所述重复的显示组合,对所述多个显示组合的显示等级进行调整;其中,调整后的所述重复的显示组合的显示等级,均低于调整后的未重复的显示组合的显示等级;
所述确定模块,具体用于将调整后的所述多个显示组合中每一个显示组合的显示等级,与所述多个显示屏中每一个显示屏的显示等级进行逐级匹配,得到所述映射关系;
所述装置还包括:接收模块和切换模块;所述接收模块,用于接收第一触发操作;所述第一触发操作用于指示所述多个显示屏中每一个显示屏对应的显示组合进行逐级切换;其中,所述逐级切换包括:将所述每一个显示屏对应的显示组合切换为高显示等级的显示组合;或者,将所述每一个显示屏对应的显示组合切换为低显示等级的显示组合;所述切换模块,用于响应于所述第一触发操作,将所述多个显示屏中每一个显示屏对应的显示组合进行逐级切换;
所述接收模块,还用于接收第二触发操作,所述第二触发操作用于指示所述多个显示屏按照第一显示模式进行显示;在所述第一显示模式中,所述多个显示屏包括主显示屏和多个副显示屏;所述主显示屏用于显示所述内窥镜拍摄的原始图像;所述多个副显示屏用于分别显示不同的显示组合;或者,接收第三触发操作;所述第三触发操作用于指示所述多个显示屏按照第二显示模式进行显示;在所述第二显示模式中,所述多个显示屏中的第一显示屏用于显示所述内窥镜拍摄的原始图像;所述多个显示屏中除所述第一显示屏之外的其他显示屏,用于分别显示不同的显示组合。
9.一种多显示屏图像显示装置,其特征在于,包括:
一个或多个处理器;
一个或多个存储器;
其中,所述一个或多个存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,当所述一个或多个处理器执行所述计算机指令时,所述图像分级显示装置执行权利要求1至6任一项所述的多显示屏图像显示方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机执行指令,当所述计算机执行指令在计算机上运行时,使得所述计算机执行权利要求1至6任一项所述的多显示屏图像显示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211145288.2A CN115565479A (zh) | 2022-09-20 | 2022-09-20 | 一种多显示屏图像显示方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211145288.2A CN115565479A (zh) | 2022-09-20 | 2022-09-20 | 一种多显示屏图像显示方法、装置及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115565479A true CN115565479A (zh) | 2023-01-03 |
Family
ID=84741235
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211145288.2A Pending CN115565479A (zh) | 2022-09-20 | 2022-09-20 | 一种多显示屏图像显示方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115565479A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115793912A (zh) * | 2023-02-02 | 2023-03-14 | 苏州一目万相科技有限公司 | 图像显示方法、图像显示装置和可读存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005286590A (ja) * | 2004-03-29 | 2005-10-13 | Fuji Photo Film Co Ltd | 画像表示方法および画像表示装置 |
US20080094512A1 (en) * | 2005-08-05 | 2008-04-24 | Samsung Electronics Co., Ltd. | Apparatus for providing multiple screens and method of dynamically configuring multiple screens |
KR20110113923A (ko) * | 2010-04-12 | 2011-10-19 | 삼성전자주식회사 | 영상 변환 장치 및 이를 포함하는 입체 영상 표시 장치 |
CN104024802A (zh) * | 2011-12-28 | 2014-09-03 | 株式会社电装 | 显示控制装置 |
CN108549859A (zh) * | 2018-04-09 | 2018-09-18 | 深圳市鹰硕技术有限公司 | 多屏互动的网络教学方法以及装置 |
CN109792560A (zh) * | 2016-09-23 | 2019-05-21 | 三星电子株式会社 | 显示装置及其控制方法 |
CN111627528A (zh) * | 2019-02-28 | 2020-09-04 | 未艾医疗技术(深圳)有限公司 | VRDS 4D医学影像多设备Ai联动显示方法及产品 |
CN114363533A (zh) * | 2022-01-10 | 2022-04-15 | 京东方科技集团股份有限公司 | 显示控制方法及装置、显示设备、计算机可读介质 |
-
2022
- 2022-09-20 CN CN202211145288.2A patent/CN115565479A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005286590A (ja) * | 2004-03-29 | 2005-10-13 | Fuji Photo Film Co Ltd | 画像表示方法および画像表示装置 |
US20080094512A1 (en) * | 2005-08-05 | 2008-04-24 | Samsung Electronics Co., Ltd. | Apparatus for providing multiple screens and method of dynamically configuring multiple screens |
KR20110113923A (ko) * | 2010-04-12 | 2011-10-19 | 삼성전자주식회사 | 영상 변환 장치 및 이를 포함하는 입체 영상 표시 장치 |
CN104024802A (zh) * | 2011-12-28 | 2014-09-03 | 株式会社电装 | 显示控制装置 |
CN109792560A (zh) * | 2016-09-23 | 2019-05-21 | 三星电子株式会社 | 显示装置及其控制方法 |
CN108549859A (zh) * | 2018-04-09 | 2018-09-18 | 深圳市鹰硕技术有限公司 | 多屏互动的网络教学方法以及装置 |
CN111627528A (zh) * | 2019-02-28 | 2020-09-04 | 未艾医疗技术(深圳)有限公司 | VRDS 4D医学影像多设备Ai联动显示方法及产品 |
CN114363533A (zh) * | 2022-01-10 | 2022-04-15 | 京东方科技集团股份有限公司 | 显示控制方法及装置、显示设备、计算机可读介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115793912A (zh) * | 2023-02-02 | 2023-03-14 | 苏州一目万相科技有限公司 | 图像显示方法、图像显示装置和可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8787701B2 (en) | Image processing apparatus and image processing method | |
WO2018099125A1 (zh) | 重叠窗口中显示内容的处理方法和*** | |
US10089957B2 (en) | Page display method and terminal | |
CN109934795B (zh) | 一种显示方法、装置、电子设备及计算机可读存储介质 | |
US11475588B2 (en) | Image processing method and device for processing image, server and storage medium | |
US9747867B2 (en) | Apparatus and method for performing image content adjustment according to viewing condition recognition result and content classification result | |
US8320457B2 (en) | Display device and method of driving the same | |
CN109543499A (zh) | 伽玛电路、电子设备以及执行光学指纹识别的方法 | |
AU2013374725B2 (en) | Display control apparatus and program | |
CN1269004C (zh) | Lcd显示器的窗口亮度增强方法 | |
CN103915072A (zh) | 一种显示***及其驱动方法 | |
US20180174555A1 (en) | Display apparatus and display method thereof | |
US10950206B2 (en) | Electronic apparatus and method for displaying contents thereof | |
CN115565479A (zh) | 一种多显示屏图像显示方法、装置及存储介质 | |
TWI400694B (zh) | 文字顯示裝置 | |
CN116825039B (zh) | 背光亮度计算方法、显示设备及计算机可读存储介质 | |
US20180084180A1 (en) | Display apparatus and method of processing image thereof | |
CN104392424A (zh) | 一种对专业灰阶图像对比度自适应的方法及*** | |
US9536273B2 (en) | Simulation method for improving picture quality of image display device and a simulation device therefor | |
CN111078090A (zh) | 一种显示方法、装置、设备和存储介质 | |
CN111859893B (zh) | 图文排版方法、装置、设备及介质 | |
US4922237A (en) | Flat panel display control apparatus | |
JPS59165138A (ja) | プラズマガスパネルデイスプレイのデイスプレイ管理システム | |
US6788311B1 (en) | Displaying data on lower resolution displays | |
US20130027292A1 (en) | Content display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |