CN108092956A - 一种获取压缩字典的方法和装置 - Google Patents

一种获取压缩字典的方法和装置 Download PDF

Info

Publication number
CN108092956A
CN108092956A CN201711249958.4A CN201711249958A CN108092956A CN 108092956 A CN108092956 A CN 108092956A CN 201711249958 A CN201711249958 A CN 201711249958A CN 108092956 A CN108092956 A CN 108092956A
Authority
CN
China
Prior art keywords
unpressed
compression dictionary
user data
targeted compression
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711249958.4A
Other languages
English (en)
Other versions
CN108092956B (zh
Inventor
刘天昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201711249958.4A priority Critical patent/CN108092956B/zh
Publication of CN108092956A publication Critical patent/CN108092956A/zh
Application granted granted Critical
Publication of CN108092956B publication Critical patent/CN108092956B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04Protocols for data compression, e.g. ROHC
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Computer And Data Communications (AREA)
  • Information Transfer Between Computers (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本发明实施例提供了一种获取压缩字典的方法和装置,获取压缩字典的方法,应用于客户端,方法包括:向服务器端发送数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;获取所述服务器端发送的所述目标压缩字典,以使用所述目标压缩字典对未压缩的用户数据进行压缩处理,所述目标压缩字典是所述服务器接收客户端发送的数据报文,判断所述数据报文中是否携带所述请求标识,若为是,建立所述目标压缩字典并向所述客户端发送的。应用本发明实施例能够实现客户端从服务器端获取压缩字典。

Description

一种获取压缩字典的方法和装置
技术领域
本发明涉及数据压缩技术领域,特别是涉及一种获取压缩字典的方法和装置。
背景技术
为了向用户提供更好的服务,互联网公司需要通过采集大量的用户数据以了解用户的使用习惯及偏好。由于用户数据的数据量较大,可以由客户端使用压缩字典对用户数据进行压缩后再上传至服务器端。在实际应用中,用户数据通常以键值对(key:value)的形式存储,此外,压缩字典包括值value与序列号的对应关系。
由于客户端的资源数据量大且在不断更新,为了保证压缩效率,需要在客户端和服务器端及时增加新的压缩字典。目前,可以通过升级客户端和服务器端的软件版本使客户端和服务器端获取到新的压缩字典。但是,由于无法控制客户端及时更新软件版本,可能会出现服务器端的软件版本已经升级,但客户端的软件版本尚未升级的情况。此时,服务器端已获取到新的压缩字典,而客户端未获取到新的压缩字典,在这种场景下,服务器端与客户端之间的传输数据的具体过程为:
首先,客户端判断在客户端已有的压缩字典中,是否存在待上传的用户数据对应的压缩字典,具体的,可以根据用户数据中的value,在已有的压缩字典中确定是否存在包括该value的压缩字典;若为是,使用该压缩字典对用户数据进行压缩处理,生成压缩后的用户数据;若为否,向服务器端上传未压缩的用户数据。
接下来,服务器端接收客户端发送的用户数据,判断该用户数据是否已压缩;若为是,使用该用户数据对应的压缩字典对该用户数据进行解压处理,得到解压后的用户数据;若为否,直接获取未压缩的用户数据。
可见,当客户端缺少压缩字典时,无法对部分的用户数据进行压缩处理,但是,向服务器端上传未压缩的用户数据,会占用大量的流量资源和带宽资源。
发明内容
本发明实施例的目的在于提供一种获取压缩字典的方法和装置,以实现客户端从服务器端获取压缩字典。具体技术方案如下:
本发明实施例提供了一种获取压缩字典的方法,应用于客户端,所述方法包括:
向服务器端发送数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
获取所述服务器端发送的所述目标压缩字典,以使用所述目标压缩字典对未压缩的用户数据进行压缩处理,所述目标压缩字典是所述服务器接收客户端发送的数据报文,判断所述数据报文中是否携带所述请求标识,若为是,建立所述目标压缩字典并向所述客户端发送的。
可选的,在所述向服务器端发送数据报文的步骤之前,所述方法还包括:
判断在所述客户端已有的压缩字典中,是否存在所述未压缩的用户数据对应的目标压缩字典;
若为否,在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识。
可选的,所述未压缩的用户数据的存储格式为键值对key:value;
在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤之前,所述方法还包括:
确定所述未压缩的用户数据中的目标key与预设的标识符的对应关系;
将所述目标key与所述标识符的对应关系确定为所述请求标识。
可选的,在所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤之前,所述方法还包括:
判断所述未压缩的用户数据在预设时间段内出现的次数,以及所述未压缩的用户数据的字节长度是否均否符合预设条件;
若为是,则执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
可选的,所述判断所述未压缩的用户数据在预设时间段内出现的次数,以及所述未压缩的用户数据的字节长度是否均否符合预设条件的步骤,包括:
判断所述未压缩的用户数据在预设时间段内出现的次数、与所述未压缩的用户数据的字节长度的乘积是否超过预设阈值;
所述若为是,则执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤,包括:
若所述乘积超过所述预设阈值,则所述未压缩的用户数据符合所述预设条件,执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
可选的,所述未压缩的用户数据的存储格式为key:value,所述压缩字典包括value与预设的序列号的对应关系;
所述获取所述服务器端发送的所述目标压缩字典的步骤,包括:
接收所述服务器端发送的所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
根据所述目标key与所述目标序列号的对应关系,以及所述未压缩的用户数据,生成所述目标压缩字典。
本发明实施例还提供了一种获取压缩字典的方法,应用于服务器端,所述方法包括:
接收客户端发送的数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
建立所述目标压缩字典;
向所述客户端发送所述目标压缩字典,以使所述客户端获取所述目标压缩字典,使用所述目标压缩字典对未压缩的用户数据进行压缩处理。
可选的,所述接收客户端发送的数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤,包括:
接收所述客户端发送的数据报文,所述数据报文包括未压缩的用户数据;
在所述建立所述目标压缩字典的步骤之前,所述方法还包括:
判断所述数据报文中是否携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
若为是,执行所述建立所述目标压缩字典的步骤。
可选的,所述未压缩的用户数据中包括关键字key;
所述请求标识包括预设的标识符与所述未压缩的用户数据中的目标key的对应关系;
所述判断所述数据报文中是否携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤,包括:
判断所述数据报文中是否包括所述标识符;
所述若为是,执行所述建立所述目标压缩字典的步骤,包括:
若所述数据报文中包括所述标识符,确定所述数据报文中携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识,执行所述建立所述目标压缩字典的步骤。
可选的,在所述建立所述目标压缩字典的步骤之前,所述方法还包括:
判断在所述服务器端已保存的压缩字典中是否包括所述目标压缩字典;
若为是,从所述已保存的压缩字典中确定所述目标压缩字典;
若为否,执行所述建立所述目标压缩字典的步骤。
可选的,所述未压缩的用户数据的存储格式为key:value;所述压缩字典包括value与预设的序列号的对应关系;
在所述向所述客户端发送所述目标压缩字典的步骤之前,所述方法还包括:
建立所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
所述向所述客户端发送所述目标压缩字典的步骤,包括:
向所述客户端发送所述目标key与所述目标序列号的对应关系,以使所述客户端根据所述目标key与所述目标序列号的对应关系,以及所述未压缩的用户数据获取所述目标压缩字典。
本发明实施例又提供了一种获取压缩字典的装置,应用于客户端,所述装置包括:
发送单元,用于向服务器端发送数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
获取单元,用于获取所述服务器端发送的所述目标压缩字典,以使用所述目标压缩字典对未压缩的用户数据进行压缩处理,所述目标压缩字典是所述服务器接收客户端发送的数据报文,判断所述数据报文中是否携带所述请求标识,若为是,建立所述目标压缩字典并向所述客户端发送的。
可选的,所述装置还包括:
判断单元,用于判断在所述客户端已有的压缩字典中,是否存在所述未压缩的用户数据对应的目标压缩字典;
添加单元,用于若所述判断单元的判断结果为在所述客户端已有的压缩字典中存在所述未压缩的用户数据对应的目标压缩字典,在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识。
可选的,所述未压缩的用户数据的存储格式为key:value;
所述装置还包括:
第一确定单元,用于确定所述未压缩的用户数据中的目标key与预设的标识符的对应关系;
第二确定单元,用于将所述目标key与预设的标识符的对应关系确定为所述请求标识。
可选的,所述装置还包括:
第二判断单元,用于判断所述未压缩的用户数据在预设时间段内出现的次数,以及所述未压缩的用户数据的字节长度是否均否符合预设条件;
执行单元,用于若所述第二判断单元的判断结果为所述未压缩的用户数据符合所述预设条件,则执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
可选的,所述第二判断单元,具体用于判断所述未压缩的用户数据在预设时间段内出现的次数、与所述未压缩的用户数据的字节长度的乘积是否超过预设阈值;
所述执行单元,具体用于若所述乘积超过所述预设阈值,则所述未压缩的用户数据符合所述预设条件,执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
可选的,所述未压缩的用户数据的存储格式为key:value,所述压缩字典包括value与预设的序列号的对应关系;
所述获取单元,包括:接收子单元和生成子单元;
所述接收子单元,用于接收所述服务器端发送的所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
所述生成子单元,用于根据所述目标key与目标序列号的对应关系,以及所述未压缩的用户数据,生成所述目标压缩字典。
本发明实施例再提供了一种获取压缩字典的装置,应用于服务器端,所述装置包括:
接收单元,用于接收客户端发送的数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
第一建立单元,用于建立所述目标压缩字典;
发送单元,用于向所述客户端发送所述目标压缩字典,以使所述客户端获取所述目标压缩字典,使用所述目标压缩字典对未压缩的用户数据进行压缩处理。
可选的,所述接收单元,具体用于接收所述客户端发送的数据报文,所述数据报文包括未压缩的用户数据;
所述装置还包括:
第一判断单元,用于判断所述数据报文中是否携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
第一执行单元,用于若所述判断单元的判断结果为所述数据报文中携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识,执行所述第一建立单元。
可选的,所述未压缩的用户数据中包括关键字key;
所述请求标识包括预设的标识符与所述未压缩的用户数据中的目标key的对应关系;
所述第一判断单元,具体用于判断所述数据报文中是否包括所述标识符;
所述第一执行单元,具体用于若所述第一判断单元的判断结果为所述数据报文中包括所述标识符,确定所述数据报文中携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识,执行所述第一建立单元。
可选的,所述装置还包括:
第二判断单元,用于判断在所述服务器端已保存的压缩字典中是否包括所述目标压缩字典;
确定单元,用于若所述第二判断单元的判断结果为在所述服务器端已保存的压缩字典中包括所述目标压缩字典,从所述已保存的压缩字典中确定所述目标压缩字典;
第二执行单元,用于若所述第二判断单元的判断结果为在所述服务器端已保存的压缩字典中不包括所述目标压缩字典,执行所述第一建立单元。
可选的,所述未压缩的用户数据的存储格式为key:value;
所述压缩字典包括value与预设的序列号的对应关系;
所述装置还包括:
第二建立单元,用于建立所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
所述发送单元,具体用于向所述客户端发送所述目标key与所述目标序列号的对应关系,以使所述客户端根据所述目标key与所述目标序列号的对应关系获取所述目标压缩字典。
本发明实施再提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述任一所述的获取压缩字典的方法。
本发明实施再提供了一种计算机可读存储介质,计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的获取压缩字典的方法。
本发明实施再提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的获取压缩字典的方法。
本发明实施例提供的一种获取压缩字典的方法和装置,首先,客户端向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;然后,客户端获取服务器端发送的目标压缩字典,目标压缩字典是服务器在接收客户端发送的数据报文之后,判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,建立目标压缩字典并向客户端发送的。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例的获取压缩字典的方法的一种流程图;
图2为本发明实施例的获取压缩字典的方法的又一种流程图;
图3为本发明实施例的获取压缩字典的方法的另一种流程图;
图4为本发明实施例的获取压缩字典的***的一种示意图;
图5为本发明实施例的获取压缩字典的装置的一种结构图;
图6为本发明实施例的获取压缩字典的又一种装置的结构图;
图7为本发明实施例的电子设备的一种示意图;
图8为本发明实施例的电子设备的又一种示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。
为了向用户提供更好的服务,互联网公司需要通过采集大量的用户数据以了解用户的使用习惯及偏好。由于用户数据的数据量较大,可以由客户端使用压缩字典对用户数据进行压缩后再上传至服务器端。在实际应用中,用户数据通常以键值(key:value)对的形式存储,此外,压缩字典包括值value与序列号的对应关系。
由于客户端的资源数据量大且在不断更新,为了保证压缩效率,需要在客户端和服务器端及时增加新的压缩字典。目前,可以通过升级客户端和服务器端的软件版本使客户端和服务器端获取到新的压缩字典。但是,由于无法控制客户端及时更新软件版本,可能会出现服务器端的软件版本已经升级,但客户端的软件版本尚未升级的情况。此时,服务器端已获取到新的压缩字典,而客户端未获取到新的压缩字典,在这种场景下,服务器端与客户端之间的传输数据的具体过程为:
首先,客户端判断在客户端已有的压缩字典中,是否存在待上传的用户数据对应的压缩字典,具体的,可以根据用户数据中的value,在已有的压缩字典中确定是否存在包括该value的压缩字典;若为是,使用该压缩字典对用户数据进行压缩处理,生成压缩后的用户数据;若为否,向服务器端上传未压缩的用户数据。
接下来,服务器端接收客户端发送的用户数据,判断该用户数据是否已压缩;若为是,使用该用户数据对应的压缩字典对该用户数据进行解压处理,得到解压后的用户数据;若为否,直接获取未压缩的用户数据。
可见,当客户端缺少压缩字典时,无法对部分的用户数据进行压缩处理,但是,向服务器端上传未压缩的用户数据,会占用大量的流量资源和带宽资源。
为了解决上述问题,本发明实施例提供了一种获取压缩字典的方法和装置,首先,客户端向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;然后,服务器端在接收客户端发送的数据报文之后,判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,建立目标压缩字典并向客户端发送的;最后,客户端获取来自服务器端的目标压缩字典。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。
本发明实施例提供了一种获取压缩字典的方法,应用于客户端。参见图1,图1为本发明实施例的获取压缩字典的方法的一种流程图,包括如下步骤:
步骤101,向服务器端发送数据报文。
其中,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识。
在本步骤中,客户端可以向服务器端发送数据报文,该数据报文包括未压缩的用户数据,以及用于请求未压缩的用户数据对应的目标压缩字典的请求标识,以实现通过该请求标识,请求服务器端建立该目标压缩字典并发送给客户端。
可选的,在步骤101之前,本发明实施例提供的获取压缩字典的方法还可以包括:
判断在客户端已有的压缩字典中,是否存在未压缩的用户数据对应的目标压缩字典;
若为否,在数据报文中添加用于请求未压缩的用户数据对应的目标压缩字典的请求标识。
具体的,客户端在向服务器端发送数据报文之前,首先可以确定客户端是否已经保存有用于压缩该用户数据的目标压缩字典;如果有,在对该用户数据进行压缩处理后发送至服务器端,在这种情况下,数据报文中包括压缩数据;如果没有,可以在数据报文中添加用于请求该用户数据对应的目标压缩字典的请求标识,在这种情况下,数据报文中包括未压缩的用户数据和该请求标识。
可选的,在上述在数据报文中添加用于请求未压缩的用户数据对应的目标压缩字典的请求标识的步骤之前,本发明实施例提供的获取压缩字典的方法还可以包括:
确定未压缩的用户数据中的目标key与预设的标识符的对应关系;
将目标key与该标识符的对应关系确定为请求标识。
需要说明的是,未压缩的用户数据的存储格式可以为key:value。具体的,客户端可以将未压缩的用户数据中的目标key与预设的标识符的对应关系,确定为请求标识。
比如,未压缩的用户数据可以为:key0=value0&key1=value1,其中,目标key包括key0和key1,对应的value分别为value0和value1;预设的标识符可以为suggesting;那么,可以将目标key与suggesting的对应关系确定为请求标识,具体记为suggesting=key0,key1。在这种情况下,客户端向服务器端发送的数据报文可以为key0=value0&key1=value1&suggesting=key0,key1。
在具体实施过程中,客户端可以选择部分压缩效率较高的用户数据,为这些用户数据请求目标压缩字典。可选的,在上述在数据报文中添加用于请求未压缩的用户数据对应的目标压缩字典的请求标识的步骤之前,本发明实施例提供的获取压缩字典的方法,还可以包括:
判断未压缩的用户数据在预设时间段内出现的次数,以及未压缩的用户数据的字节长度是否均否符合预设条件;
若为是,则执行在数据报文中添加用于请求未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
具体的,可以根据实际情况设置预设条件,其中,预设条件可以包括在预设时间段内未压缩的用户数据出现的次数超过预设的次数阈值,以及未压缩的用户数据的字节长度超过预设的长度阈值等。当未压缩的用户数据符合预设条件时,可以认为这些用户数据属于压缩效率较高的用户数据,才会在数据报文中添加用于请求目标压缩字典的请求标识。这样,可以减少客户端及服务器端的工作量,提高工作效率。
进一步的,判断未压缩的用户数据是否符合预设条件的步骤,包括:
判断未压缩的用户数据在预设时间段内出现的次数、与未压缩的用户数据的字节长度的乘积是否超过预设阈值;
所述若为是,则执行在数据报文中添加所述用于请求未压缩的用户数据对应的目标压缩字典的请求标识的步骤,包括:
若未压缩的用户数据在预设时间段内出现的次数、与未压缩的用户数据的字节长度的乘积超过预设阈值,则未压缩的用户数据符合预设条件,执行在数据报文中添加用于请求未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
具体的,可以将预设条件设置为未压缩的用户数据在预设时间段内出现的次数、与未压缩的用户数据的字节长度的乘积是否超过预设阈值,若该乘积超过预设阈值,说明该用户数据符合预设条件,属于压缩效率较高的用户数据,可以在数据报文中添加用于请求目标压缩字典的请求标识;若该乘积没有超过预设阈值,说明该用户数据不符合预设条件,不属于压缩效率较高的用户数据,无需在数据报文中添加用于请求目标压缩字典的请求标识。
当然,也可以根据实际需求设置预设条件,以使客户端可以根据用户自身的特点来请求最合适的字典。
步骤102,获取服务器端发送的目标压缩字典,以使用目标压缩字典对未压缩的用户数据进行压缩处理。
其中,所述目标压缩字典是所述服务器接收客户端发送的数据报文,判断所述数据报文中是否携带所述请求标识,若为是,建立所述目标压缩字典并向所述客户端发送的。
在本步骤中,客户端可以获取服务器端发送的目标压缩字典,这样,客户端就能够使用该目标压缩字典,对未压缩的用户数据进行压缩处理;其中,服务器端在接收到来自客户端的数据报文时,可以先判断该数据报文中是否携带上述请求标识,如果是,该数据报文中的用户数据为未压缩数据,服务器端可以针对该用户数据建立目标压缩字典,并向客户端发送该目标压缩字典,以使客户端获取该目标压缩字典。
可选的,步骤102可以包括:
接收服务器端发送的未压缩的用户数据中的目标key与目标压缩字典中的目标序列号的对应关系,目标序列号为目标value在目标压缩字典中对应的预设的序列号,目标value为目标key在未压缩的用户数据中对应的value;
根据目标key与目标序列号的对应关系,以及未压缩的用户数据,生成目标压缩字典。
具体的,由于用户数据中的value值通常包括较多字节,服务器端向客户端直接发送压缩字典可能会占用较多的流量资源和带宽资源。为了提高发送效率,服务器端可以向客户端发送目标key与目标序列号的对应关系,使客户端根据该对应关系,以及未压缩的用户数据,获取目标压缩字典;其中,目标序列号为目标value在目标压缩字典中对应的预设的序列号,目标value为目标key在未压缩的用户数据中对应的value。
比如,未压缩的用户数据可以为:key0=value0&key1=value1,接收到的目标key与目标序列号的对应关系包括key0与$K0的对应关系,以及key1与$K1的对应关系;那么,客户端根据接收到key0与$K0的对应关系,以及key1与$K1的对应关系,结合未压缩的用户数据key0=value0&key1=value1,可以得知目标压缩字典包括value0与$K0的对应关系,以及value1与$K1的对应关系。
可见,在本发明实施例提供的获取压缩字典的方法中,客户端首先向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;然后,客户端获取服务器端发送的目标压缩字典,目标压缩字典是服务器在接收客户端发送的数据报文之后,判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,建立目标压缩字典并向客户端发送的。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。
此外,在本发明实施例中,可以由客户端来确定获取压缩效率较高的用户数据所需的压缩字典,而服务器端只需要根据客户端的请求来建立相应的压缩字典即可。
在一种实现方式中,客户端在初始情况下可以不预先保存任何压缩字典,在对用户数据的处理过程中,仅从服务器端来获取压缩字典,可以降低客户端开发成本。
对应的,本发明实施例还提供了一种获取压缩字典的方法,应用于服务器端。参见图2,图2为本发明实施例的获取压缩字典的方法的又一种流程图,包括如下步骤:
步骤201,接收客户端发送的数据报文。
其中,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识。
在本步骤中,服务器端可以接收来自客户端的数据报文,其中,数据报文中包括未压缩的用户数据,以及用于请求未压缩的用户数据对应的目标压缩字典的请求标识,这样,服务器端就可以根据该请求标识,建立该未压缩的用户数据对应的目标压缩字典并发送给客户端,使客户端能够使用该目标压缩字典对用户数据进行压缩处理。
步骤202,建立目标压缩字典。
在本步骤中,服务器端可以建立接收到的用户数据对应的目标压缩字典。
可选的,在步骤202之前,本发明实施例提供的获取压缩字典的方法还可以包括:
判断在服务器端已保存的压缩字典中是否包括目标压缩字典;
若为是,从已保存的压缩字典中确定目标压缩字典;
若为否,执行步骤202。
具体的,服务器端在接收到包括未压缩的用户数据以及上述请求标识的数据报文之后,可以判断是否已经保存有目标压缩字典,如果有,可以从已保存的压缩字典中确定该目标压缩字典,无需再新建目标压缩字典,以提高工作效率;如果没有,可以通过执行步骤202,建立目标压缩字典。
步骤203,向客户端发送目标压缩字典,以使客户端获取目标压缩字典,使用目标压缩字典对未压缩的用户数据进行压缩处理。
在本步骤中,服务器端可以向客户端发送建立好的目标压缩字典,这样,客户端就可以获取到该目标压缩字典,使用该目标压缩字典对未压缩的用户数据进行压缩处理。
可选的,在步骤203之前,本发明实施例提供的获取压缩字典的方法还可以包括:
建立未压缩的用户数据中的目标key与目标压缩字典中的目标序列号的对应关系,目标序列号为目标value在目标压缩字典中对应的预设的序列号,目标value为目标key在未压缩的用户数据中对应的value;
对应的,步骤203可以包括:
向客户端发送目标key与目标序列号的对应关系,以使客户端根据目标key与目标序列号的对应关系,以及未压缩的用户数据获取目标压缩字典。
需要说明的是,压缩字典可以包括value与预设的序列号的对应关系。
具体的,由于用户数据中的value值通常包括较多字节,服务器端向客户端直接发送压缩字典可能会占用较多的流量资源和带宽资源。为了提高发送效率,服务器端可以建立未压缩的用户数据中的目标key,与目标压缩字典中的目标序列号的对应关系,并将该对应关系发送给客户端,使客户端根据该对应关系,以及未压缩的用户数据,获取目标压缩字典;其中,目标序列号为目标value在目标压缩字典中对应的预设的序列号,目标value为目标key在未压缩的用户数据中对应的value。
比如,未压缩的用户数据可以为:key0=value0&key1=value1,其中,目标key包括key0和key1,对应的目标value分别为value0和value1;该未压缩的用户数据对应的目标压缩字典中包括目标value0与预设的序列号$K0的对应关系,以及目标value1与预设的序列号$K1的对应关系,其中,$K0为value0对应的预设的序列号,$K1为value1对应的预设的序列号;那么,服务器端建立的目标key与目标序列号的对应关系包括key0与$K0的对应关系,以及key1与$K1的对应关系。当客户端接收到key0与$K0的对应关系,以及key1与$K1的对应关系时,结合未压缩的用户数据key0=value0&key1=value1,可以得知目标压缩字典包括value0与$K0的对应关系,以及value1与$K1的对应关系。
可见,在本发明实施例提供的获取压缩字典的方法中,服务器端接收来自客户端的数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;然后,服务器端判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,建立目标压缩字典并发送给客户端。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。
为了更加清楚的说明本发明实施例的获取压缩字典的方法,本发明实施例另提供了一种获取压缩字典的方法,包括客户端和服务器端。参见图3,图3为本发明实施例的获取压缩字典的方法的另一种流程图,包括如下步骤:
步骤301,客户端向服务器端发送数据报文。
其中,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识。
本发明的详细过程和技术效果可以参考图1所示的获取压缩字典的方法中的步骤101,在此不再赘述。
步骤302,服务器端接收客户端发送的数据报文。
其中,数据报文包括未压缩的用户数据。
在本步骤中,服务器端可以接收来自客户端的数据报文,其中,数据报文中包括未压缩的用户数据,服务器还需要通过后续的步骤判断该数据报文中是否包括用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若该数据报文包括该请求标识,服务器端就可以根据该请求标识,建立该未压缩的用户数据对应的目标压缩字典并发送给客户端,使客户端能够使用该目标压缩字典对用户数据进行压缩处理。
步骤303,服务器端判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识;若为是,执行步骤304。
在本步骤中,服务器端可以判断接收到的数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识;若包括该请求标识,则继续执行步骤304;若不包括该请求标识,则服务器端可以直接获取该未压缩的用户数据,不再通过执行后续步骤建立目标压缩字典。
可选的,未压缩的用户数据中包括关键字key;请求标识包括预设的标识符与未压缩的用户数据中的目标key的对应关系;
相应的,步骤303可以包括:
判断数据报文中是否包括标识符;
若数据报文中包括标识符,确定数据报文中携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,执行步骤304。
具体的,由于上述用于请求未压缩的用户数据对应的目标压缩字典的请求标识包括预设的标识符与未压缩的用户数据中的目标key的对应关系,因此,服务器端可以通过判断数据报文中是否包括该标识符来确定该数据报文中是否携带上述请求标识;若数据报文中包括该标识符,说明该数据报文中携带上述请求标识,可以执行后续的步骤304,若数据报文中不包括该标识符,说明该数据报文中没有携带上述请求标识,服务器端可以直接获取该未压缩的用户数据,不再通过执行后续步骤建立目标压缩字典。
需要说明的是,数据报文中不携带上述该请求标识的具体处理过程可以参考现有技术。
比如,服务器端接收到的数据报文为key0=value0&key1=value1&suggesting=key0,key1,suggesting=key0,key1为用于请求未压缩的用户数据对应的目标压缩字典的请求标识,其中,预设的标识符为suggesting,该标识符对应的目标key为key0和key1;那么,服务器端可以通过判断数据报文中是否包括标识符suggesting来确定该数据报文中是否携带上述请求标识。
步骤304,服务器端建立目标压缩字典。
本发明的详细过程和技术效果可以参考图2所示的获取压缩字典的方法中的步骤202,在此不再赘述。
步骤305,服务器端向客户端发送目标压缩字典。
本发明的详细过程和技术效果可以参考图2所示的获取压缩字典的方法中的步骤203,在此不再赘述。
步骤306,客户端获取服务器端发送的目标压缩字典,以使用目标压缩字典对未压缩的用户数据进行压缩处理。
本发明的详细过程和技术效果可以参考图1所示的获取压缩字典的方法中的步骤102,在此不再赘述。
可见,在本发明实施例提供的获取压缩字典的方法中,客户端首先向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;接下来,服务器端接收来自客户端的数据报文;服务器端判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,建立目标压缩字典并发送给客户端;最后,客户端获取服务器端发送的目标压缩字典。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。
本发明实施例另提供了一种获取压缩字典的***。参见图4,图4为本发明实施例的获取压缩字典的***的一种示意图。
在图4中,获取压缩字典的***包括服务器端和客户端A、客户端B、客户端C,该***的工作流程如下:
第一步,客户端向服务器端发送数据报文。
具体的,客户端可以向服务器端发送数据报文,该数据报文包括未压缩的用户数据,以及用于请求未压缩的用户数据对应的目标压缩字典的请求标识,以实现通过该请求标识,请求服务器端建立该目标压缩字典并发送给客户端。
第二步,服务器端接收客户端发送的数据报文。
具体的,服务器端可以接收来自客户端的数据报文,这样,服务器端就可以根据该请求标识,建立该未压缩的用户数据对应的目标压缩字典并发送给客户端,使客户端能够使用该目标压缩字典对用户数据进行压缩处理。。
第三步,服务器端判断在服务器端已保存的压缩字典中是否包括目标压缩字典,若为是,执行第四步,若为否,执行第五步。
具体的,服务器端在接收到包括未压缩的用户数据以及上述请求标识的数据报文之后,可以判断是否已经保存有目标压缩字典,如果有,可以从已保存的压缩字典中确定该目标压缩字典,无需再新建目标压缩字典,以提高工作效率;如果没有,可以通过执行第五步,建立目标压缩字典。
第四步,若为是,服务器端从已保存的压缩字典中确定目标压缩字典。
具体的,当服务器端已保存目标压缩字典时,服务器端可以从已保存的压缩字典中确定目标压缩字典,无需再新建目标压缩字典,以提高工作效率。
第五步,服务器端建立目标压缩字典。
具体的,当服务器端未保存目标压缩字典时,服务器端可以建立目标压缩字典。
第六步,服务器端向客户端发送目标压缩字典。
具体的,服务器端可以向客户端发送由第四步查找到的,或者由第五步建立好的目标压缩字典。
第七步,客户端获取服务器端发送的目标压缩字典,以使用目标压缩字典对未压缩的用户数据进行压缩处理。
具体的,客户端可以获取服务器端发送的目标压缩字典,这样,客户端就能够使用该目标压缩字典,对未压缩的用户数据进行压缩处理;其中,服务器端在接收到来自客户端的数据报文时,可以先判断该数据报文中是否携带上述请求标识,如果是,该数据报文中的用户数据为未压缩数据,服务器端可以针对该用户数据建立目标压缩字典,并向客户端发送该目标压缩字典,以使客户端获取该目标压缩字典。
需要说明的是,生成压缩字典的***的处理流程的详细步骤和技术效果可以参考前文图1、图2和图3所示的生成压缩字典的方法中的相关说明,在此不再赘述。
可见,在本发明实施例提供的获取压缩字典的***中,客户端首先向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;接下来,服务器端接收来自客户端的数据报文;服务器端判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,查找或者建立目标压缩字典并发送给客户端;最后,客户端获取服务器端发送的目标压缩字典。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。
本发明实施例再提供了一种获取压缩字典的装置,应用于客户端。参见图5,图5为本发明实施例的获取压缩字典的装置的一种结构图,该装置包括:
发送单元501,用于向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;
获取单元502,用于获取服务器端发送的目标压缩字典,以使用目标压缩字典对未压缩的用户数据进行压缩处理,目标压缩字典是服务器接收客户端发送的数据报文,判断数据报文中是否携带请求标识,若为是,建立目标压缩字典并向客户端发送的。
可选的,装置还包括:
判断单元,用于判断在客户端已有的压缩字典中,是否存在未压缩的用户数据对应的目标压缩字典;
添加单元,用于若判断单元的判断结果为在客户端已有的压缩字典中存在未压缩的用户数据对应的目标压缩字典,在数据报文中添加用于请求未压缩的用户数据对应的目标压缩字典的请求标识。
可选的,未压缩的用户数据的存储格式为键值对key:value;
装置还包括:
第一确定单元,用于确定未压缩的用户数据中的目标key与预设的标识符的对应关系;
第二确定单元,用于将目标key与预设的标识符的对应关系确定为请求标识。
可选的,压缩字典包括value与预设的序列号的对应关系;
获取单元502,包括:接收子单元和生成子单元;
接收子单元,用于接收所述服务器端发送的所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
生成子单元,用于根据目标key与目标序列号的对应关系,以及未压缩的用户数据,生成目标压缩字典。
可见,在本发明实施例提供的获取压缩字典的装置中,客户端首先向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;然后,客户端获取服务器端发送的目标压缩字典,目标压缩字典是服务器在接收客户端发送的数据报文之后,判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,建立目标压缩字典并向客户端发送的。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。
本发明实施例再提供了一种获取压缩字典的装置,应用于服务器端。参见图6,图6为本发明实施例的获取压缩字典的又一种装置的结构图,该装置包括:
接收单元601,用于接收客户端发送的数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;
第一建立单元602,用于建立目标压缩字典;
发送单元603,用于向客户端发送目标压缩字典,以使客户端获取目标压缩字典,使用目标压缩字典对未压缩的用户数据进行压缩处理。
可选的,接收单元601,具体用于接收客户端发送的数据报文,数据报文包括未压缩的用户数据;
装置还包括:
第一判断单元,用于判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识;
第一执行单元,用于若判断单元的判断结果为数据报文中携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,执行第一建立单元602。
可选的,未压缩的用户数据中包括关键字key;
请求标识包括预设的标识符与未压缩的用户数据中的目标key的对应关系;
第一判断单元,具体用于判断数据报文中是否包括标识符;
第一执行单元,具体用于若第一判断单元的判断结果为数据报文中包括标识符,确定数据报文中携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,执行第一建立单元602。
可选的,装置还包括:
第二判断单元,用于判断在服务器端已保存的压缩字典中是否包括目标压缩字典;
确定单元,用于若第二判断单元的判断结果为在服务器端已保存的压缩字典中包括目标压缩字典,从已保存的压缩字典中确定目标压缩字典;
第二执行单元,用于若第二判断单元的判断结果为在服务器端已保存的压缩字典中不包括目标压缩字典,执行第一建立单元602。
可选的,未压缩的用户数据的存储格式为键值对key:value;
压缩字典包括value与预设的序列号的对应关系;
装置还包括:
第二建立单元,用于建立所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
发送单元603,具体用于向客户端发送目标key与目标序列号的对应关系,以使客户端根据目标key与目标序列号的对应关系获取目标压缩字典。
可见,在本发明实施例提供的获取压缩字典的装置中,服务器端接收来自客户端的数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;然后,服务器端判断数据报文中是否携带用于请求未压缩的用户数据对应的目标压缩字典的请求标识,若为是,建立目标压缩字典并发送给客户端。这样,客户端能够通过向服务器端发送未压缩的用户数据所需的目标压缩字典的请求标识,获取压缩字典。即使客户端的软件版本不更新,也能够从服务器端获取到所需的压缩字典,避免由于向服务器端发送未压缩的用户数据而占用大量的流量资源和带宽资源,提高流量资源和带宽资源的使用效率。
本发明实施例再提供了一种电子设备,参考图7,图7为本发明实施例的电子设备的一种示意图,如图7所示,电子设备包括处理器701、通信接口702、存储器703和通信总线704,其中,处理器701,通信接口702,存储器703通过通信总线704完成相互间的通信,
存储器703,用于存放计算机程序;
处理器701,用于执行存储器703上所存放的程序时,实现如下步骤:
向服务器端发送数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;
获取服务器端发送的目标压缩字典,以使用目标压缩字典对未压缩的用户数据进行压缩处理,目标压缩字典是服务器接收客户端发送的数据报文,判断数据报文中是否携带请求标识,若为是,建立目标压缩字典并向客户端发送的。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
本发明实施例再提供了一种电子设备,参考图8,图8为本发明实施例的电子设备的又一种示意图,如图8所示,电子设备包括处理器801、通信接口802、存储器803和通信总线804,其中,处理器801,通信接口802,存储器803通过通信总线804完成相互间的通信,
存储器803,用于存放计算机程序;
处理器801,用于执行存储器803上所存放的程序时,实现如下步骤:
接收客户端发送的数据报文,数据报文包括未压缩的用户数据和用于请求未压缩的用户数据对应的目标压缩字典的请求标识;
建立目标压缩字典;
向客户端发送目标压缩字典,以使客户端获取目标压缩字典,使用目标压缩字典对未压缩的用户数据进行压缩处理。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
本发明实施例再提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的获取压缩字典的方法。
本发明实施例再提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的获取压缩字典的方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于***实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。

Claims (24)

1.一种获取压缩字典的方法,其特征在于,应用于客户端,所述方法包括:
向服务器端发送数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
获取所述服务器端发送的所述目标压缩字典,以使用所述目标压缩字典对未压缩的用户数据进行压缩处理,所述目标压缩字典是所述服务器接收客户端发送的数据报文,判断所述数据报文中是否携带所述请求标识,若为是,建立所述目标压缩字典并向所述客户端发送的。
2.根据权利要求1所述的方法,其特征在于,在所述向服务器端发送数据报文的步骤之前,所述方法还包括:
判断在所述客户端已有的压缩字典中,是否存在所述未压缩的用户数据对应的目标压缩字典;
若为否,在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识。
3.根据权利要求2所述的方法,其特征在于,所述未压缩的用户数据的存储格式为键值对key:value;
在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤之前,所述方法还包括:
确定所述未压缩的用户数据中的目标key与预设的标识符的对应关系;
将所述目标key与所述标识符的对应关系确定为所述请求标识。
4.根据权利要求2所述的方法,其特征在于,在所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤之前,所述方法还包括:
判断所述未压缩的用户数据在预设时间段内出现的次数,以及所述未压缩的用户数据的字节长度是否均否符合预设条件;
若为是,则执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
5.根据权利要求4所述的方法,其特征在于,
所述判断所述未压缩的用户数据在预设时间段内出现的次数,以及所述未压缩的用户数据的字节长度是否均否符合预设条件的步骤,包括:
判断所述未压缩的用户数据在预设时间段内出现的次数、与所述未压缩的用户数据的字节长度的乘积是否超过预设阈值;
所述若为是,则执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤,包括:
若所述乘积超过所述预设阈值,则所述未压缩的用户数据符合所述预设条件,执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
6.根据权利要求1所述的方法,其特征在于,所述未压缩的用户数据的存储格式为key:value,所述压缩字典包括value与预设的序列号的对应关系;
所述获取所述服务器端发送的所述目标压缩字典的步骤,包括:
接收所述服务器端发送的所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
根据所述目标key与所述目标序列号的对应关系,以及所述未压缩的用户数据,生成所述目标压缩字典。
7.一种获取压缩字典的方法,其特征在于,应用于服务器端,所述方法包括:
接收客户端发送的数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
建立所述目标压缩字典;
向所述客户端发送所述目标压缩字典,以使所述客户端获取所述目标压缩字典,使用所述目标压缩字典对未压缩的用户数据进行压缩处理。
8.根据权利要求7所述的方法,其特征在于,
所述接收客户端发送的数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤,包括:
接收所述客户端发送的数据报文,所述数据报文包括未压缩的用户数据;
在所述建立所述目标压缩字典的步骤之前,所述方法还包括:
判断所述数据报文中是否携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
若为是,执行所述建立所述目标压缩字典的步骤。
9.根据权利要求8所述的方法,其特征在于,所述未压缩的用户数据中包括关键字key;
所述请求标识包括预设的标识符与所述未压缩的用户数据中的目标key的对应关系;
所述判断所述数据报文中是否携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤,包括:
判断所述数据报文中是否包括所述标识符;
所述若为是,执行所述建立所述目标压缩字典的步骤,包括:
若所述数据报文中包括所述标识符,确定所述数据报文中携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识,执行所述建立所述目标压缩字典的步骤。
10.根据权利要求7所述的方法,其特征在于,在所述建立所述目标压缩字典的步骤之前,所述方法还包括:
判断在所述服务器端已保存的压缩字典中是否包括所述目标压缩字典;
若为是,从所述已保存的压缩字典中确定所述目标压缩字典;
若为否,执行所述建立所述目标压缩字典的步骤。
11.根据权利要求7所述的方法,其特征在于,所述未压缩的用户数据的存储格式为key:value;所述压缩字典包括value与预设的序列号的对应关系;
在所述向所述客户端发送所述目标压缩字典的步骤之前,所述方法还包括:
建立所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
所述向所述客户端发送所述目标压缩字典的步骤,包括:
向所述客户端发送所述目标key与所述目标序列号的对应关系,以使所述客户端根据所述目标key与所述目标序列号的对应关系,以及所述未压缩的用户数据获取所述目标压缩字典。
12.一种获取压缩字典的装置,其特征在于,应用于客户端,所述装置包括:
发送单元,用于向服务器端发送数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
获取单元,用于获取所述服务器端发送的所述目标压缩字典,以使用所述目标压缩字典对未压缩的用户数据进行压缩处理,所述目标压缩字典是所述服务器接收客户端发送的数据报文,判断所述数据报文中是否携带所述请求标识,若为是,建立所述目标压缩字典并向所述客户端发送的。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
第一判断单元,用于判断在所述客户端已有的压缩字典中,是否存在所述未压缩的用户数据对应的目标压缩字典;
添加单元,用于若所述判断单元的判断结果为在所述客户端已有的压缩字典中存在所述未压缩的用户数据对应的目标压缩字典,在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识。
14.根据权利要求13所述的装置,其特征在于,所述未压缩的用户数据的存储格式为key:value;
所述装置还包括:
第一确定单元,用于确定所述未压缩的用户数据中的目标key与预设的标识符的对应关系;
第二确定单元,用于将所述目标key与预设的标识符的对应关系确定为所述请求标识。
15.根据权利要求13所述的装置,其特征在于,所述装置还包括:
第二判断单元,用于判断所述未压缩的用户数据在预设时间段内出现的次数,以及所述未压缩的用户数据的字节长度是否均否符合预设条件;
执行单元,用于若所述第二判断单元的判断结果为所述未压缩的用户数据符合所述预设条件,则执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
16.根据权利要求15所述的装置,其特征在于,
所述第二判断单元,具体用于判断所述未压缩的用户数据在预设时间段内出现的次数、与所述未压缩的用户数据的字节长度的乘积是否超过预设阈值;
所述执行单元,具体用于若所述乘积超过所述预设阈值,则所述未压缩的用户数据符合所述预设条件,执行所述在所述数据报文中添加所述用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识的步骤。
17.根据权利要求12所述的装置,其特征在于,所述未压缩的用户数据的存储格式为key:value,所述压缩字典包括value与预设的序列号的对应关系;
所述获取单元,包括:接收子单元和生成子单元;
所述接收子单元,用于接收所述服务器端发送的所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
所述生成子单元,用于根据所述目标key与目标序列号的对应关系,以及所述未压缩的用户数据,生成所述目标压缩字典。
18.一种获取压缩字典的装置,其特征在于,应用于服务器端,所述装置包括:
接收单元,用于接收客户端发送的数据报文,所述数据报文包括未压缩的用户数据和用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
第一建立单元,用于建立所述目标压缩字典;
发送单元,用于向所述客户端发送所述目标压缩字典,以使所述客户端获取所述目标压缩字典,使用所述目标压缩字典对未压缩的用户数据进行压缩处理。
19.根据权利要求18所述的装置,其特征在于,
所述接收单元,具体用于接收所述客户端发送的数据报文,所述数据报文包括未压缩的用户数据;
所述装置还包括:
第一判断单元,用于判断所述数据报文中是否携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识;
第一执行单元,用于若所述判断单元的判断结果为所述数据报文中携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识,执行所述第一建立单元。
20.根据权利要求19所述的装置,其特征在于,
所述未压缩的用户数据中包括关键字key;
所述请求标识包括预设的标识符与所述未压缩的用户数据中的目标key的对应关系;
所述第一判断单元,具体用于判断所述数据报文中是否包括所述标识符;
所述第一执行单元,具体用于若所述第一判断单元的判断结果为所述数据报文中包括所述标识符,确定所述数据报文中携带用于请求所述未压缩的用户数据对应的目标压缩字典的请求标识,执行所述第一建立单元。
21.根据权利要求18所述的装置,其特征在于,所述装置还包括:
第二判断单元,用于判断在所述服务器端已保存的压缩字典中是否包括所述目标压缩字典;
确定单元,用于若所述第二判断单元的判断结果为在所述服务器端已保存的压缩字典中包括所述目标压缩字典,从所述已保存的压缩字典中确定所述目标压缩字典;
第二执行单元,用于若所述第二判断单元的判断结果为在所述服务器端已保存的压缩字典中不包括所述目标压缩字典,执行所述第一建立单元。
22.根据权利要求18所述的装置,其特征在于,
所述未压缩的用户数据的存储格式为key:value;
所述压缩字典包括value与预设的序列号的对应关系;
所述装置还包括:
第二建立单元,用于建立所述未压缩的用户数据中的目标key与所述目标压缩字典中的目标序列号的对应关系,所述目标序列号为目标value在所述目标压缩字典中对应的预设的序列号,所述目标value为所述目标key在所述未压缩的用户数据中对应的value;
所述发送单元,具体用于向所述客户端发送所述目标key与所述目标序列号的对应关系,以使所述客户端根据所述目标key与所述目标序列号的对应关系获取所述目标压缩字典。
23.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-6任一所述的方法步骤。
24.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求7-11任一所述的方法步骤。
CN201711249958.4A 2017-12-01 2017-12-01 一种获取压缩字典的方法和装置 Active CN108092956B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711249958.4A CN108092956B (zh) 2017-12-01 2017-12-01 一种获取压缩字典的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711249958.4A CN108092956B (zh) 2017-12-01 2017-12-01 一种获取压缩字典的方法和装置

Publications (2)

Publication Number Publication Date
CN108092956A true CN108092956A (zh) 2018-05-29
CN108092956B CN108092956B (zh) 2020-12-04

Family

ID=62173569

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711249958.4A Active CN108092956B (zh) 2017-12-01 2017-12-01 一种获取压缩字典的方法和装置

Country Status (1)

Country Link
CN (1) CN108092956B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109088867A (zh) * 2018-08-08 2018-12-25 浙江天地人科技有限公司 一种减小数据上传连接频次的方法
WO2020156261A1 (zh) * 2019-01-31 2020-08-06 华为技术有限公司 一种数据压缩的方法及基站
CN112769730A (zh) * 2019-10-21 2021-05-07 北京车和家信息技术有限公司 一种页面压缩方法、装置、客户端及服务端
CN114666406A (zh) * 2022-02-24 2022-06-24 国电南瑞科技股份有限公司 一种基于物模型的电力物联网数据压缩方法及装置
EP4009696A4 (en) * 2019-08-05 2022-09-14 Huawei Technologies Co., Ltd. COMMUNICATION METHOD AND DEVICE

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101211352A (zh) * 2006-12-28 2008-07-02 凌阳科技股份有限公司 一种电子字典数据更新***及其方法
CN102194499A (zh) * 2010-03-15 2011-09-21 华为技术有限公司 一种压缩字典同步的方法和装置
CN103716056A (zh) * 2012-09-29 2014-04-09 华为技术有限公司 数据压缩方法、数据解压缩方法和设备
CN104917786A (zh) * 2014-03-11 2015-09-16 杭州雾隐美地传媒有限公司 一种节省客户端和服务器交互时的传输流量的方法和模块
US20150286668A1 (en) * 2014-04-03 2015-10-08 Thomas Legler Optimizing update operations in in-memory database systems

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101211352A (zh) * 2006-12-28 2008-07-02 凌阳科技股份有限公司 一种电子字典数据更新***及其方法
CN102194499A (zh) * 2010-03-15 2011-09-21 华为技术有限公司 一种压缩字典同步的方法和装置
CN103716056A (zh) * 2012-09-29 2014-04-09 华为技术有限公司 数据压缩方法、数据解压缩方法和设备
CN104917786A (zh) * 2014-03-11 2015-09-16 杭州雾隐美地传媒有限公司 一种节省客户端和服务器交互时的传输流量的方法和模块
US20150286668A1 (en) * 2014-04-03 2015-10-08 Thomas Legler Optimizing update operations in in-memory database systems

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109088867A (zh) * 2018-08-08 2018-12-25 浙江天地人科技有限公司 一种减小数据上传连接频次的方法
WO2020156261A1 (zh) * 2019-01-31 2020-08-06 华为技术有限公司 一种数据压缩的方法及基站
EP3910903A4 (en) * 2019-01-31 2022-03-09 Huawei Technologies Co., Ltd. DATA COMPRESSION METHOD AND BASE STATION
AU2020214893B2 (en) * 2019-01-31 2022-10-20 Huawei Technologies Co., Ltd. Data compression method and base station
US11902401B2 (en) 2019-01-31 2024-02-13 Huawei Technologies Co., Ltd. Data compression method and base station
EP4009696A4 (en) * 2019-08-05 2022-09-14 Huawei Technologies Co., Ltd. COMMUNICATION METHOD AND DEVICE
CN112769730A (zh) * 2019-10-21 2021-05-07 北京车和家信息技术有限公司 一种页面压缩方法、装置、客户端及服务端
CN112769730B (zh) * 2019-10-21 2023-03-24 北京车和家信息技术有限公司 一种页面压缩方法、装置、客户端及服务端
CN114666406A (zh) * 2022-02-24 2022-06-24 国电南瑞科技股份有限公司 一种基于物模型的电力物联网数据压缩方法及装置
CN114666406B (zh) * 2022-02-24 2023-11-21 国电南瑞科技股份有限公司 一种基于物模型的电力物联网数据压缩方法及装置

Also Published As

Publication number Publication date
CN108092956B (zh) 2020-12-04

Similar Documents

Publication Publication Date Title
CN108092956A (zh) 一种获取压缩字典的方法和装置
WO2019001006A1 (zh) 一种图像数据的编码、解码方法及装置
US11657284B2 (en) Neural network model apparatus and compressing method of neural network model
US11729086B2 (en) Methods and systems for internet speed testing
CN111654498A (zh) 设备添加方法及物联网平台
US20170264526A1 (en) Information collecting apparatus, information analyzing apparatus, and information transferring method based on different internet of things platforms
KR101188507B1 (ko) 웹 플랫폼을 이용한 아이피 기반 IoT 사물 브라우징 기술 및 네트워크 중계 기술 기반 이기종 네트워크 중계 장치 및 방법과 이를 이용한 사용자 단말
WO2020230658A1 (ja) 特徴抽出装置及び状態推定システム
WO2020125527A1 (zh) 数据压缩方法、装置、计算机设备和存储介质
CN115766310A (zh) 应用于智能家居***的数据传输方法、装置、设备及介质
CN107431491A (zh) 改进的文件压缩和加密
CN112367215B (zh) 基于机器学习的网络流量协议识别方法和装置
EP3255837A1 (en) Method and system for automating troubleshooting of a network
CN108011952A (zh) 一种获取压缩字典的方法和装置
CN116582794A (zh) 音频传输方法及其***、装置、电子设备及存储介质
WO2024001163A1 (zh) 属性数据的转换方法和装置、存储介质及电子装置
CN111464506A (zh) 用于物联网的协议转换方法、装置及计算机可读存储介质
CN114244911A (zh) 语音解析方法、装置、接收端设备及存储介质
CN113204683B (zh) 信息重构方法和装置、存储介质及电子设备
CN105430006B (zh) 一种动态实时调整spice图像品质的方法
CN114466088B (zh) 扫地机器人的数据传输方法、装置、存储介质及终端
CN112422525B (zh) 一种故障数据传输方法、装置、设备及存储介质
Iglesias et al. Enabling powerful GUIs in ISOBUS networks by transparent data compression
CN112769845B (zh) 漏洞测试方法、装置、电子装置和计算机设备
WO2020259704A1 (zh) 一种用于电子设备的数据压缩、数据解压方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant