CN112527219A - 基于wayland协议的图形合成方法、装置和*** - Google Patents

基于wayland协议的图形合成方法、装置和*** Download PDF

Info

Publication number
CN112527219A
CN112527219A CN201910878092.6A CN201910878092A CN112527219A CN 112527219 A CN112527219 A CN 112527219A CN 201910878092 A CN201910878092 A CN 201910878092A CN 112527219 A CN112527219 A CN 112527219A
Authority
CN
China
Prior art keywords
window
manager
graphic
application client
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910878092.6A
Other languages
English (en)
Inventor
胡冲
梁玉平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201910878092.6A priority Critical patent/CN112527219A/zh
Priority to PCT/CN2020/110345 priority patent/WO2021052100A1/zh
Publication of CN112527219A publication Critical patent/CN112527219A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Digital Computer Display Output (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提出一种基于wayland协议的图形合成方法、装置和***，一种基于wayland协议的图形合成方法应用于图形显示合成端，包括：获取内核输入事件，根据内核输入事件计算窗口焦点，并通过输入管理通道将内核输入事件发送到窗口焦点对应的图形应用客户端；通过窗口管理通道接收至少一个图形应用客户端发送的窗口管理请求；通过图形管理通道接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；将合成的图形窗口输出到至少一个显示设备。

Description

基于wayland协议的图形合成方法、装置和***
技术领域
本申请涉及终端设备，例如涉及一种基于wayland协议的图形合成方法、装置和***。
背景技术
Wayland是一种图形显示协议(Protocol)，wayland协议将一个图形***分为图形应用客户端(client)和图形显示合成端(compositor)。图形应用客户端和图形显示合成端通过wayland协议进行通信。
其中图形应用客户端通过协议定义的事件(event)与图形显示合成端进行通信，图形显示合成端通过协议定义的请求(request)与图形应用客户端进行通信。Wayland协议中存在多个图形应用客户端与一个图形显示合成端进行通信的情况。
目前基于wayland协议设计的图形显示合成端，由于设计的结构限制，很难达到显示设备的刷新帧率，随着需要合成的图形应用客户端的数量越多，刷新帧率下降的越快，可能造成显示不流畅、卡顿等现象，影响用户使用体验。
发明内容
本申请提供一种基于wayland协议的图形合成方法、装置和***，可以提高基于wayland协议的图形显示***的显示流畅度。
本申请实施例提供一种基于wayland协议的图形合成方法，应用于图形显示合成端，包括：
获取内核输入事件，根据内核输入事件计算窗口焦点，并通过输入管理通道将内核输入事件发送到窗口焦点对应的图形应用客户端；
通过窗口管理通道接收至少一个图形应用客户端发送的窗口管理请求；
通过图形管理通道接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；
将合成的图形窗口输出到至少一个显示设备。
本申请实施例提供一种基于wayland协议的图形显示合成端，其特征在于，包括：
窗口管理器、合成管理器、输入管理器、输出管理器、消息管理器和资源管理器；
窗口管理器通过窗口管理通道与至少一个图形应用客户端连接，用于为至少一个图形应用客户端分配窗口，确定窗口焦点，接收至少一个图形应用客户端发送的窗口管理请求；
合成管理器通过图形管理通道与至少一个图形应用客户端连接，用于接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；
输入管理器通过输入管理通道与至少一个图形应用客户端连接，用于从内核获取输入事件，并将内核输入事件根据窗口管理器确定的窗口焦点发送给对应的图形应用客户端；
输出管理器用于将合成管理器合成的图形窗口输出到至少一个显示设备；
消息管理器用于为窗口管理器、合成管理器、输入管理器和输出管理器之间提供传输消息通道；
资源管理器用于管理窗口管理器、合成管理器、输入管理器和输出管理器的资源分配，以及输入管理通道、窗口管理通道和图形管理通道的资源分配。
本申请实施例提供一种基于wayland协议的图形显示***，其特征在于，包括：图形显示合成端和至少一个图形应用客户端；
图形显示合成端和至少一个图形应用客户端之间包括输入管理通道、窗口管理通道和图形管理通道；
图形显示合成端用于获取内核输入事件，根据内核输入事件计算窗口焦点，并通过输入管理通道将内核输入事件发送到窗口焦点对应的图形应用客户端；通过窗口管理通道接收至少一个图形应用客户端发送的窗口管理请求；通过图形管理通道接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；将合成的图形窗口输出到至少一个显示设备；
图形应用客户端用于根据内核输入事件绘制图形缓存，获取用户输入的窗口调整指令，根据窗口调整指令重绘图形缓存并生成窗口管理请求。
附图说明
图1为一实施例提供的一种基于wayland协议的图形显示***的结构示意图；
图2为一实施例提供的另一种基于wayland协议的图形显示***的结构示意图；
图3为一实施例提供的另一种基于wayland协议的图形显示***的结构示意图；
图4为一实施例提供的一种基于wayland协议的图形显示方法的流程图；
图5为一实施例提供的一种基于wayland协议的图形显示合成端的结构示意图。
具体实施方式
下文中将结合附图对本申请的实施例进行详细说明。
图1为一实施例提供的一种基于wayland协议的图形显示***的结构示意图，如图1所示，本实施例提供的基于wayland协议的图形显示***包括：图形显示合成端11和至少一个图形应用客户端12。
图形显示合成端11和至少一个图形应用客户端12之间包括输入管理通道14、窗口管理通道15和图形管理通道16。
图形显示合成端11用于获取内核输入事件，根据内核输入事件计算窗口焦点，并通过输入管理通道14将内核输入事件发送到窗口焦点对应的图形应用客户端12；通过窗口管理14通道接收至少一个图形应用客户端12发送的窗口管理请求；通过图形管理通道16接收至少一个图形应用客户端12绘制的图形缓存，将至少一个图形应用客户端12绘制的图形缓存应用至少一个图形应用客户端12发送的窗口管理请求，得到合成后的图形窗口；将合成的图形窗口输出到至少一个显示设备13。
图形应用客户端12用于根据内核输入事件绘制图形缓存，获取用户输入的窗口调整指令，根据窗口调整指令重绘图形缓存并生成窗口管理请求。
Wayland是一种图形显示协议，将图形***分为图形应用客户端和图形显示合成端。图形应用客户端和图形显示合成端通过wayland协议进行通信，其中图形应用客户端通过协议定义的事件(event)与图形显示合成端进行通信，图形显示合成端通过协议定义的请求(request)与图形应用客户端进行通信，图形显示合成端可以同时与多个图形应用客户端进行通信。基于wayland协议可以设计不同的图形显示***，但目前基于wayland协议的图形显示***，在图形应用客户端和图形显示合成端之间通过一个协议域套接字(domain socket)连接，也就是图形应用客户端和图形显示合成端之间通过一个单通道进行连接，那么当需要合成的图形应用客户端的数量增多将造成帧率的下降，从而造成显示不流畅、卡顿等现象。
在对wayland协议进行分析后，可以将wayland协议中的事件分成三个种类，分别为：输入相关的事件与请求、图形显示相关的事件与请求、窗口管理相关的事件与请求。那么就可以将三个种类的事件与请求分开，分别通过不同的通道在图形应用客户端和图形显示合成端之间传输三个种类的事件与请求。因此在本实施例提供的基于wayland协议的图形显示***中，在图形显示合成端11和至少一个图形应用客户端12之间建立了输入管理通道14、窗口管理通道15和图形管理通道16。
输入管理通道14用于传输输入相关的事件与请求；窗口管理通道15用于传输窗口管理相关的事件与请求；和图形管理通道16用于传输图形显示相关的事件与请求。
详细来说，每个应用程序具有对应的图形应用客户端12，图形应用客户端12用于为对应的应用程序绘制图形窗口所需的图形缓存，将绘制的图形缓存发送至图形显示合成端11后再由图形显示合成端11发送至显示设备进行显示。那么图形显示合成端首先为各图形应用客户端12分配窗口，通过窗口管理通道15与图形显示合成端11连接，确定各图形应用客户端12对应的窗口焦点，并提供给各图形应用客户端12各种设置接口，例如移动、调整大小、最大化、最小化、全屏等。那么各图形应用客户端12在接收到用户的输入后，即获取到用户输入的窗口调整指令后，图形应用客户端12会改变对应的窗口，执行如移动、调整大小、最大化、最小化、全屏等处理，然后使用图形管理器(Graphics Processing Unit，GPU)进行重绘处理，重新绘制窗口对应的图形缓存，同时图形应用客户端12生成窗口管理请求。图形显示合成端11就可以通过窗口管理通道15接收至少一个图形应用客户端12发送的窗口管理请求。
图形显示合成端11还通过输入管理通道14与多个图形应用客户端12连接，在其获取内核输入事件之后，根据内核输入事件计算窗口焦点，并通过输入管理通道14将内核输入事件发送到窗口焦点对应的图形应用客户端12。
图形显示合成端11还通过图形管理通道16与多个图形应用客户端12连接，通过图形管理通道16接收至少一个图形应用客户端12绘制的图形缓存，将至少一个图形应用客户端12绘制的图形缓存应用至少一个图形应用客户端12发送的窗口管理请求，得到合成后的图形窗口；将合成的图形窗口输出到至少一个显示设备13。
图形应用客户端12用于根据内核输入事件绘制图形缓存，获取用户输入的窗口调整指令，根据窗口调整指令重绘图形缓存并生成窗口管理请求。那么图形应用客户端12的图形缓存、窗口调整指令和内核输入事件分别通过不同的通道与图形显示合成端11进行交互，从而降低了每个数据通道的信息承载量。
由于本实施例提供的基于wayland协议的图形显示***中，将图形显示合成端11和至少一个图形应用客户端12通过三个通道连接，三个通道分别传输不同类别的事件与请求，那么将可以大大加快响应速度，避免图形显示合成端11和至少一个图形应用客户端12之间传输的信息过多而产生拥堵，从而可以提高基于wayland协议的图形显示***的显示流畅度。
本实施例提供的基于wayland协议的图形显示***包括：图形显示合成端和至少一个图形应用客户端；图形显示合成端和至少一个图形应用客户端之间包括输入管理通道、窗口管理通道和图形管理通道；图形显示合成端用于获取内核输入事件，根据内核输入事件计算窗口焦点，并通过输入管理通道将内核输入事件发送到窗口焦点对应的图形应用客户端；通过窗口管理通道接收至少一个图形应用客户端发送的窗口管理请求；通过图形管理通道接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；将合成的图形窗口输出到至少一个显示设备；图形应用客户端用于根据内核输入事件绘制图形缓存，获取用户输入的窗口调整指令，根据窗口调整指令重绘图形缓存并生成窗口管理请求，由于通过三个通道分别传输不同类别的事件与请求，那么将可以大大加快响应速度，避免图形显示合成端和至少一个图形应用客户端之间传输的信息过多而产生拥堵，从而可以提高基于wayland协议的图形显示***的显示流畅度。
图2为一实施例提供的另一种基于wayland协议的图形显示***的结构示意图，如图2所示，本实施例提供的基于wayland协议的图形显示***在图1的基础上，图形显示合成端11包括窗口管理器111、合成管理器112、输入管理器113和输出管理器114。
窗口管理器111通过窗口管理通道15与至少一个图形应用客户端12连接，用于为至少一个图形应用客户端12分配窗口，确定窗口焦点，接收至少一个图形应用客户端12发送的窗口管理请求。
合成管理器通112过图形管理通道16与至少一个图形应用客户端12连接，用于接收至少一个图形应用客户端12绘制的图形缓存，将至少一个图形应用客户端12绘制的图形缓存应用至少一个图形应用客户端12发送的窗口管理请求，得到合成后的图形窗口。
输入管理器113通过输入管理通道14与至少一个图形应用客户端12连接，用于从内核获取输入事件，并将内核输入事件根据窗口管理器111确定的窗口焦点发送给对应的图形应用客户端12。
输出管理器114用于将合成管理器112合成的图形窗口输出到至少一个显示设备13。
窗口管理器111、合成管理器112、输入管理器113和输出管理器114分别通过多个线程进行并行处理，可以提高图形显示合成端11的处理效率。
图3为一实施例提供的另一种基于wayland协议的图形显示***的结构示意图，如图3所示，本实施例提供的基于wayland协议的图形显示***在图2的基础上，图形显示合成端11还包括消息管理器115和资源管理器116。
消息管理器115用于为窗口管理器111、合成管理器112、输入管理器113和输出管理器114之间提供传输消息通道。消息管理器115主要实现基于wayland协议的图形显示***与外部服务、以及图形显示合成端11内部各模块之间的通信，采用序列化消息队列方式通信。
资源管理器116用于管理窗口管理器111、合成管理器112、输入管理器113和输出管理器114的资源分配，以及输入管理通道14、窗口管理通道15和图形管理通道16的资源分配。资源管理器116主要管理图形显示合成端11与图形应用客户端12之间的各通道的通信资源，并依据图形应用客户端12的请求进行窗口管理器111、合成管理器112、输入管理器113、输出管理器114的资源分配。
图形显示合成端11中的各模块(包括窗口管理器111、合成管理器112、输入管理器113、输出管理器114、消息管理器115和资源管理器116)分配单独的线程或者线程组提供其微服务功能，各模块之间通过消息管理器115来进行通信，资源管理器116进行资源的分配，保障各模块之间协作运行。
在一实施例中，窗口管理器111还用于对至少一个图形应用客户端12的显示窗口进行统一计算，确定顶层可见显示窗口，通过窗口管理通道15通知不可见窗口对应的图形应用客户端12暂停图形绘制。窗口管理器111对各图形应用客户端12的显示窗口的脏区域、透明区域、Z序等统一计算，以便确定顶层可见显示窗口，并通过专用的窗口管理通道15发送命令给处于后台或者被遮挡而使其不可见的图形应用客户端12暂停图形绘制，这些暂停的图形应用客户端12将不再占用GPU资源，以保障顶层窗口的GPU资源的优先占用，而实现在多图形应用客户端12的场景下可以流畅显示。
图4为一实施例提供的一种基于wayland协议的图形显示方法的流程图，如图4所示，如图4所示，本实施例提供的方法包括如下步骤。
步骤S4010，获取内核输入事件，根据内核输入事件计算窗口焦点，并通过输入管理通道将内核输入事件发送到窗口焦点对应的图形应用客户端。
步骤S4020，通过窗口管理通道接收至少一个图形应用客户端发送的窗口管理请求。
步骤S4030，通过图形管理通道接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口。
步骤S4040，将合成的图形窗口输出到至少一个显示设备。
本实施例提供的基于wayland协议的图形合成方法应用于图形显示合成端，图形显示合成端可以为图1所示实施例中基于wayland协议的图形合成***中的图形显示合成端11。本实施例提供的基于wayland协议的图形显示方法的具体实现方法和技术效果已经在图1所示实施例中进行了阐述，此处不再赘述。
在一实施例中，本申请实施例提供的基于wayland协议的图形显示方法在图4的基础上，还包括：采用图形管理器为至少一个图形应用客户端分配窗口，确定窗口焦点，通过窗口管理通道接接收至少一个图形应用客户端发送的窗口管理请求；采用合成管理器通过图形管理通道接接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；采用输入管理器从内核获取输入事件，并将内核输入事件根据窗口管理器确定的窗口焦点通过输入管理通道发送给对应的图形应用客户端；采用输出管理器将合成的图形窗口输出到至少一个显示设备。
在一实施例中，本申请实施例提供的基于wayland协议的图形显示方法在图4的基础上，还包括：采用消息管理器为窗口管理器、合成管理器、输入管理器和输出管理器之间提供传输消息通道；采用资源管理器管理窗口管理器、合成管理器、输入管理器和输出管理器的资源分配，以及输入管理通道、窗口管理通道和图形管理通道的资源分配。
在一实施例中，本申请实施例提供的基于wayland协议的图形显示方法在图4的基础上，采用窗口管理器对至少一个图形应用客户端的显示窗口进行统一计算，确定顶层可见显示窗口，通过窗口管理通道通知不可见窗口对应的图形应用客户端暂停图形绘制。
图5为一实施例提供的一种基于wayland协议的图形显示合成端的结构示意图，如图5所示，本实施例提供的基于wayland协议的图形显示合成端包括：
窗口管理器51、合成管理器52、输入管理器53、输出管理器54、消息管理器55和资源管理器56。
窗口管理器51通过窗口管理通道与至少一个图形应用客户端连接，用于为至少一个图形应用客户端分配窗口，确定窗口焦点，接收至少一个图形应用客户端发送的窗口管理请求；合成管理器52通过图形管理通道与至少一个图形应用客户端连接，用于接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；输入管理器53通过输入管理通道与至少一个图形应用客户端连接，用于从内核获取输入事件，并将内核输入事件根据窗口管理器51确定的窗口焦点发送给对应的图形应用客户端；输出管理器54用于将合成管理器52合成的图形窗口输出到至少一个显示设备；消息管理器55用于为窗口管理器51、合成管理器52、输入管理器53和输出管理器54之间提供传输消息通道；资源管理器56用于管理窗口管理器51、合成管理器52、输入管理器53和输出管理器54的资源分配，以及输入管理通道、窗口管理通道和图形管理通道的资源分配。
本实施例提供的基于wayland协议的图形显示合成端可以为图3所实施例中的图形显示合成端。
在一实施例中，窗口管理器51还用于对至少一个图形应用客户端的显示窗口进行统一计算，确定顶层可见显示窗口，通过窗口管理通道通知不可见窗口对应的图形应用客户端暂停图形绘制。
本申请实施例还提供一种包含计算机可执行指令的存储介质，计算机可执行指令在由计算机处理器执行时用于执行一种基于wayland协议的图形合成方法，该方法包括：获取内核输入事件，根据内核输入事件计算窗口焦点，并通过输入管理通道将内核输入事件发送到窗口焦点对应的图形应用客户端；通过窗口管理通道接收至少一个图形应用客户端发送的窗口管理请求；通过图形管理通道接收至少一个图形应用客户端绘制的图形缓存，将至少一个图形应用客户端绘制的图形缓存应用至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；将合成的图形窗口输出到至少一个显示设备。
以上所述，仅为本申请的示例性实施例而已，并非用于限定本申请的保护范围。
本领域内的技术人员应明白，术语用户终端涵盖任何适合类型的无线用户设备，例如移动电话、便携数据处理装置、便携网络浏览器或车载移动台。
一般来说，本申请的多种实施例可以在硬件或专用电路、软件、逻辑或其任何组合中实现。例如，一些方面可以被实现在硬件中，而其它方面可以被实现在可以被控制器、微处理器或其它计算装置执行的固件或软件中，尽管本申请不限于此。
本申请的实施例可以通过移动装置的数据处理器执行计算机程序指令来实现，例如在处理器实体中，或者通过硬件，或者通过软件和硬件的组合。计算机程序指令可以是汇编指令、指令集架构(InstructionSet Architecture，ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码。
本申请附图中的任何逻辑流程的框图可以表示程序步骤，或者可以表示相互连接的逻辑电路、模块和功能，或者可以表示程序步骤与逻辑电路、模块和功能的组合。计算机程序可以存储在存储器上。存储器可以具有任何适合于本地技术环境的类型并且可以使用任何适合的数据存储技术实现，例如但不限于只读存储器(Read-Only Memory，ROM)、随机访问存储器(Random Access Memory，RAM)、光存储器装置和***(数码多功能光碟(Digital Video Disc，DVD)或光盘(Compact Disc，CD)等。计算机可读介质可以包括非瞬时性存储介质。数据处理器可以是任何适合于本地技术环境的类型，例如但不限于通用计算机、专用计算机、微处理器、数字信号处理器(Digital Signal Processing，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、可编程逻辑器件(Field-Programmable Gate Array，FGPA)以及基于多核处理器架构的处理器。

Claims (10)

1.一种基于wayland协议的图形合成方法，应用于图形显示合成端，其特征在于，包括：
获取内核输入事件，根据所述内核输入事件计算窗口焦点，并通过输入管理通道将所述内核输入事件发送到所述窗口焦点对应的图形应用客户端；
通过窗口管理通道接收至少一个图形应用客户端发送的窗口管理请求；
通过图形管理通道接收所述至少一个图形应用客户端绘制的图形缓存，将所述至少一个图形应用客户端绘制的图形缓存应用所述至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；
将所述合成的图形窗口输出到至少一个显示设备。
2.根据权利要求1所述的方法，其特征在于，还包括：
采用图形管理器为所述至少一个图形应用客户端分配窗口，确定窗口焦点，通过所述窗口管理通道接接收所述至少一个图形应用客户端发送的窗口管理请求；
采用合成管理器通过所述图形管理通道接接收所述至少一个图形应用客户端绘制的图形缓存，将所述至少一个图形应用客户端绘制的图形缓存应用所述至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；
采用输入管理器从内核获取输入事件，并将所述内核输入事件根据所述窗口管理器确定的窗口焦点通过所述输入管理通道发送给对应的图形应用客户端；
采用输出管理器将合成的图形窗口输出到至少一个显示设备。
3.根据权利要求2所述的方法，其特征在于，还包括：
采用消息管理器为所述所述窗口管理器、所述合成管理器、所述输入管理器和所述输出管理器之间提供传输消息通道；
采用资源管理器管理所述窗口管理器、合成管理器、输入管理器和输出管理器的资源分配，以及所述输入管理通道、窗口管理通道和图形管理通道的资源分配。
4.根据权利要求2或3所述的方法，其特征在于，还包括：
采用窗口管理器对所述至少一个图形应用客户端的显示窗口进行统一计算，确定顶层可见显示窗口，通过所述窗口管理通道通知不可见窗口对应的图形应用客户端暂停图形绘制。
5.一种基于wayland协议的图形显示合成端，其特征在于，包括：
窗口管理器、合成管理器、输入管理器、输出管理器、消息管理器和资源管理器；
所述窗口管理器通过窗口管理通道与所述至少一个图形应用客户端连接，用于为所述至少一个图形应用客户端分配窗口，确定窗口焦点，接收所述至少一个图形应用客户端发送的窗口管理请求；
所述合成管理器通过图形管理通道与所述至少一个图形应用客户端连接，用于接收所述至少一个图形应用客户端绘制的图形缓存，将所述至少一个图形应用客户端绘制的图形缓存应用所述至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；
所述输入管理器通过输入管理通道与所述至少一个图形应用客户端连接，用于从内核获取输入事件，并将所述内核输入事件根据所述窗口管理器确定的窗口焦点发送给对应的图形应用客户端；
所述输出管理器用于将所述合成管理器合成的图形窗口输出到至少一个显示设备；
所述消息管理器用于为所述所述窗口管理器、所述合成管理器、所述输入管理器和所述输出管理器之间提供传输消息通道；
所述资源管理器用于管理所述窗口管理器、合成管理器、输入管理器和输出管理器的资源分配，以及所述输入管理通道、窗口管理通道和图形管理通道的资源分配。
6.根据权利要求5所述的基于wayland协议的图形显示合成端，其特征在于，所述窗口管理器还用于对所述至少一个图形应用客户端的显示窗口进行统一计算，确定顶层可见显示窗口，通过所述窗口管理通道通知不可见窗口对应的图形应用客户端暂停图形绘制。
7.一种基于wayland协议的图形显示***，其特征在于，包括：图形显示合成端和至少一个图形应用客户端；
所述图形显示合成端和所述至少一个图形应用客户端之间包括输入管理通道、窗口管理通道和图形管理通道；
所述图形显示合成端用于获取内核输入事件，根据所述内核输入事件计算窗口焦点，并通过所述输入管理通道将所述内核输入事件发送到所述窗口焦点对应的图形应用客户端；通过所述窗口管理通道接收所述至少一个图形应用客户端发送的窗口管理请求；通过所述图形管理通道接收所述至少一个图形应用客户端绘制的图形缓存，将所述至少一个图形应用客户端绘制的图形缓存应用所述至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；将所述合成的图形窗口输出到至少一个显示设备；
所述图形应用客户端用于根据所述内核输入事件绘制图形缓存，获取用户输入的窗口调整指令，根据所述窗口调整指令重绘图形缓存并生成所述窗口管理请求。
8.根据权利要求7所述的***，其特征在于，所述图形显示合成端包括窗口管理器、合成管理器、输入管理器和输出管理器；
所述窗口管理器通过所述窗口管理通道与所述至少一个图形应用客户端连接，用于为所述至少一个图形应用客户端分配窗口，确定窗口焦点，接收所述至少一个图形应用客户端发送的窗口管理请求；
所述合成管理器通过所述图形管理通道与所述至少一个图形应用客户端连接，用于接收所述至少一个图形应用客户端绘制的图形缓存，将所述至少一个图形应用客户端绘制的图形缓存应用所述至少一个图形应用客户端发送的窗口管理请求，得到合成后的图形窗口；
所述输入管理器通过所述输入管理通道与所述至少一个图形应用客户端连接，用于从内核获取输入事件，并将所述内核输入事件根据所述窗口管理器确定的窗口焦点发送给对应的图形应用客户端；
所述输出管理器用于将所述合成管理器合成的图形窗口输出到至少一个显示设备。
9.根据权利要求8所述的***，其特征在于，所述图形显示合成端还包括消息管理器和资源管理器；
所述消息管理器用于为所述所述窗口管理器、所述合成管理器、所述输入管理器和所述输出管理器之间提供传输消息通道；
所述资源管理器用于管理所述窗口管理器、合成管理器、输入管理器和输出管理器的资源分配，以及所述输入管理通道、窗口管理通道和图形管理通道的资源分配。
10.根据权利要求8或9所述的***，其特征在于，所述窗口管理器还用于对所述至少一个图形应用客户端的显示窗口进行统一计算，确定顶层可见显示窗口，通过所述窗口管理通道通知不可见窗口对应的图形应用客户端暂停图形绘制。
CN201910878092.6A 2019-09-17 2019-09-17 基于wayland协议的图形合成方法、装置和*** Pending CN112527219A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910878092.6A CN112527219A (zh) 2019-09-17 2019-09-17 基于wayland协议的图形合成方法、装置和***
PCT/CN2020/110345 WO2021052100A1 (zh) 2019-09-17 2020-08-20 基于wayland协议的图形合成方法、装置、***和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910878092.6A CN112527219A (zh) 2019-09-17 2019-09-17 基于wayland协议的图形合成方法、装置和***

Publications (1)

Publication Number Publication Date
CN112527219A true CN112527219A (zh) 2021-03-19

Family

ID=74883334

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910878092.6A Pending CN112527219A (zh) 2019-09-17 2019-09-17 基于wayland协议的图形合成方法、装置和***

Country Status (2)

Country Link
CN (1) CN112527219A (zh)
WO (1) WO2021052100A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113467666A (zh) * 2021-09-06 2021-10-01 北京鲸鲮信息***技术有限公司 一种调整应用窗口的方法和装置
CN113672321A (zh) * 2021-07-26 2021-11-19 中标软件有限公司 支持客户端窗口坐标的轻量级wayland合成器的实现方法
CN115131488A (zh) * 2022-08-31 2022-09-30 麒麟软件有限公司 wayland图形显示环境下管理显示缓存的方法及***

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9396001B2 (en) * 2010-11-08 2016-07-19 Sony Corporation Window management for an embedded system
CN103268620A (zh) * 2013-04-28 2013-08-28 华为技术有限公司 图形处理方法、图形处理装置及终端设备
CN105701037B (zh) * 2015-12-30 2019-09-17 惠州市德赛西威汽车电子股份有限公司 车载娱乐***中weston与DRM同时访问显示控制器的***及方法
CN107292807B (zh) * 2016-03-31 2020-12-04 阿里巴巴集团控股有限公司 一种图形合成方法、窗口设置方法及***
CN107436760A (zh) * 2017-06-30 2017-12-05 百度在线网络技术（北京）有限公司 多窗口渲染方法及装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113672321A (zh) * 2021-07-26 2021-11-19 中标软件有限公司 支持客户端窗口坐标的轻量级wayland合成器的实现方法
CN113672321B (zh) * 2021-07-26 2023-08-22 中标软件有限公司 支持客户端窗口坐标的轻量级wayland合成器的实现方法
CN113467666A (zh) * 2021-09-06 2021-10-01 北京鲸鲮信息***技术有限公司 一种调整应用窗口的方法和装置
CN113467666B (zh) * 2021-09-06 2021-11-16 北京鲸鲮信息***技术有限公司 一种调整应用窗口的方法和装置
CN115131488A (zh) * 2022-08-31 2022-09-30 麒麟软件有限公司 wayland图形显示环境下管理显示缓存的方法及***
CN115131488B (zh) * 2022-08-31 2022-11-29 麒麟软件有限公司 wayland图形显示环境下管理显示缓存的方法及***

Also Published As

Publication number Publication date
WO2021052100A1 (zh) 2021-03-25

Similar Documents

Publication Publication Date Title
EP3751418B1 (en) Resource configuration method and apparatus, terminal, and storage medium
WO2021052100A1 (zh) 基于wayland协议的图形合成方法、装置、***和计算机可读存储介质
TW201040834A (en) Peer-to-peer dynamically appendable logical displays
EP3076630A1 (en) Method and device for sending data in vdi environment
EP2624611A1 (en) Method and system for visualizing an adaptive screen according to a terminal
EP3985658A1 (en) Information display method and apparatus
EP3133481B1 (en) Terminal device display method and terminal device
KR20130096059A (ko) 원격의 싱크 장치를 표시하는 방법, 이를 위한 소스 장치 및 시스템
CN108415772B (zh) 一种基于容器的资源调整方法、装置和介质
CN104461052B (zh) 智能设备间的文字输入方法及装置
EP2849080A1 (en) Image display method and device
US8860740B2 (en) Method and apparatus for processing a display driver in virture desktop infrastructure
CN114116092A (zh) 云桌面***处理方法、云桌面***控制方法以及相关设备
WO2017206893A1 (zh) 界面刷新同步方法、装置、终端及存储介质
CN113094015A (zh) 全息多屏显示实现方法、***、计算机设备和存储介质
CN114265648B (zh) 编码调度方法、服务器及客户端和获取远程桌面的***
CN113313623A (zh) 水印信息显示方法、装置、电子设备、计算机可读介质
US20230068162A1 (en) Method of displaying information, electronic device and storage medium
CN109831673B (zh) 一种直播间数据处理方法、装置、设备及存储介质
CN115373618B (zh) 一种多屏显示方法、装置、车机及存储介质
US20120038654A1 (en) Computer system and related graphics apparatus, display apparatus, and computer program product
CN104571982B (zh) 超高分辨率显示***及显示控制方法
CN115866156A (zh) 数据处理方法、装置、电子设备及存储介质
EP3974976A1 (en) Facilitation of guest application display from host operating system
CN109471574B (zh) 用于配置资源的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination