CN114095567A - 数据访问请求的处理方法、装置、计算机设备及介质 - Google Patents
数据访问请求的处理方法、装置、计算机设备及介质 Download PDFInfo
- Publication number
- CN114095567A CN114095567A CN202111188949.5A CN202111188949A CN114095567A CN 114095567 A CN114095567 A CN 114095567A CN 202111188949 A CN202111188949 A CN 202111188949A CN 114095567 A CN114095567 A CN 114095567A
- Authority
- CN
- China
- Prior art keywords
- node
- access request
- data access
- nodes
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims description 9
- 230000036541 health Effects 0.000 claims abstract description 45
- 238000012545 processing Methods 0.000 claims abstract description 41
- 238000000034 method Methods 0.000 claims abstract description 30
- 238000012216 screening Methods 0.000 claims abstract description 18
- 230000004044 response Effects 0.000 claims abstract description 14
- 238000003860 storage Methods 0.000 claims abstract description 14
- 238000004364 calculation method Methods 0.000 claims description 15
- 238000011156 evaluation Methods 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 7
- 238000007405 data analysis Methods 0.000 claims description 5
- 238000012163 sequencing technique Methods 0.000 claims description 3
- 238000001914 filtration Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/12—Avoiding congestion; Recovering from congestion
- H04L47/125—Avoiding congestion; Recovering from congestion by balancing the load, e.g. traffic engineering
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer And Data Communications (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种数据访问请求的处理方法、装置、计算机设备及存储介质,所述方法包括:在接收到客户端发送的数据访问请求时,获取客户端的IP地址,并基于IP地址,确定客户端的真实物理地址,按照预设的筛选条件,从集群服务器节点中,获取与真实物理地址距离对应的节点,作为候选节点,对每个候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点,基于动态均衡的方式,从有效节点中选取目标节点,并基于目标节点对数据访问请求进行响应。实现对不同来源的访问请求按地理位置进行快速分发,提高访问请求响应速度。
Description
技术领域
本发明涉及数据处理领域,尤其涉及一种数据访问请求的处理方法、装置、计算机设备及介质。
背景技术
随着计算机技术的快速发展,越来越多的事务通过网络进行处理,访问互联网络来获取信息,成为日常生活中的一种很常见的事情,通过网络进行数据访问,主要是通过客户端访问指定域名或者IP地址,进而从指定域名或者IP地址对应的存储服务器中获取对应的数据资源,来获取相应的信息。因而,随着访问数据的急速增加,对于进行网络数据访问的服务器性能等,要求也越来越高,现有的方式是通过增加一些服务器来并发使用,以缓解服务器的压力,但现有方式通常是直接进行随机分发,如何合理地进行数据访问请求的分发以使数据访问请求可以最快被响应,也即,如何提高数据访问请求的处理效率,成为一个亟待解决的问题。
发明内容
本发明实施例提供一种数据访问请求的处理方法、装置、计算机设备和存储介质,以提高数据访问请求的处理效率。
为了解决上述技术问题,本申请实施例提供一种数据访问请求的处理方法,包括:
在接收到客户端发送的数据访问请求时,获取所述客户端的IP地址,并基于所述IP地址,确定客户端的真实物理地址;
按照预设的筛选条件,从集群服务器节点中,获取与所述真实物理地址距离对应的节点,作为候选节点;
对每个所述候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点;
基于动态均衡的方式,从所述有效节点中选取目标节点,并基于所述目标节点对所述数据访问请求进行响应。
可选地,所述按照预设的筛选条件,从集群服务器节点中,获取与所述真实物理地址距离对应的节点,作为候选节点包括:
确定所述真实物理地址对应的地理区域,作为目标地理区域;
读取集群服务器节点中区域与所述目标地理区域对应的节点,作为初始节点;
获取每个所述初始节点的实际物理地址,并计算每个所述初始节点的实际物理地址与所述目标地理区域之间的距离区间;
将每个距离区间的中间值作为所述实际物理地址与所述目标地理区域的参考距离,并对所述参考距离进行由小到大的排序进行排序,得到距离序列;
从所述距离序列中从前往后选取预设数量的参考距离,作为目标参考距离;
将所述目标参考距离对应的节点,作为所述候选节点。
可选地,所述对每个所述候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点包括:
针对每个所述候选节点,获取所述候选节点的节点参数信息,其中,所述节点参数信息包括节点吞吐量,数据包数量,请求数响应速度,延时和往返时延RTT中的至少一项;
基于所述节点参数信息和预设的权重,对每个所述候选节点进行健康计算,得到每个所述候选节点对应的健康分值;
将所述健康分值超过预设分值阈值的候选节点,确认为健康结果为健康的节点,并将检查结果为健康的节点,作为所述有效节点。
可选地,所述基于动态均衡的方式,从所述有效节点中选取目标节点包括:
获取每个所述有效节点的历史稳定性评分;
针对每个所述有效节点,基于所述历史稳定性平和和所述健康分值,对所述有效节点进行综合评估,得到评估分值;
将评估分值最大的有效节点,作为所述目标节点。
可选地,在所述获取每个所述有效节点的历史稳定性评分之前,所述数据访问请求的处理方法还包括:在每次数据访问请求处理完之后,对执行本次数据访问请求的目标节点进行稳定性评分,得到基础稳定性评分;
对执行本次数据访问请求的目标节点的每次基础稳定性评分进行数据分析,得到所述执行本次数据访问请求的目标节点的历史稳定性评分,并对所述历史稳定性评分进行存储。
为了解决上述技术问题,本申请实施例还提供一种数据访问请求的处理装置,包括:
物理地址获取模块,用于在接收到客户端发送的数据访问请求时,获取所述客户端的IP地址,并基于所述IP地址,确定客户端的真实物理地址;
候选节点确定模块,用于按照预设的筛选条件,从集群服务器节点中,获取与所述真实物理地址距离对应的节点,作为候选节点;
有效节点筛选模块,用于对每个所述候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点;
访问请求响应模块,用于基于动态均衡的方式,从所述有效节点中选取目标节点,并基于所述目标节点对所述数据访问请求进行响应。
可选地,候选节点确定模块包括:
地理区域确定单元,用于确定所述真实物理地址对应的地理区域,作为目标地理区域;
初始节点获取单元,用于读取集群服务器节点中区域与所述目标地理区域对应的节点,作为初始节点;
距离计算单元,用于获取每个所述初始节点的实际物理地址,并计算每个所述初始节点的实际物理地址与所述目标地理区域之间的距离区间;
距离排序单元,用于将每个距离区间的中间值作为所述实际物理地址与所述目标地理区域的参考距离,并对所述参考距离进行由小到大的排序进行排序,得到距离序列;
目标参考距离选取单元,用于从所述距离序列中从前往后选取预设数量的参考距离,作为目标参考距离;
候选节点确定单元,用于将所述目标参考距离对应的节点,作为所述候选节点。
可选地,所述有效节点筛选模块包括:
节点参数信息获取单元,用于针对每个所述候选节点,获取所述候选节点的节点参数信息,其中,所述节点参数信息包括节点吞吐量,数据包数量,请求数响应速度,延时和往返时延RTT中的至少一项;
健康分值计算单元,用于基于所述节点参数信息和预设的权重,对每个所述候选节点进行健康计算,得到每个所述候选节点对应的健康分值;
有效节点确定单元,用于将所述健康分值超过预设分值阈值的候选节点,确认为健康结果为健康的节点,并将检查结果为健康的节点,作为所述有效节点。
可选地,所述访问请求响应模块包括:
历史评分获取单元,用于获取每个所述有效节点的历史稳定性评分;
评分分值计算单元,用于针对每个所述有效节点,基于所述历史稳定性平和和所述健康分值,对所述有效节点进行综合评估,得到评估分值;
目标节点确定单元,用于将评估分值最大的有效节点,作为所述目标节点。
可选地,所述数据访问请求的处理装置还包括:
第一评分模块,用于在每次数据访问请求处理完之后,对执行本次数据访问请求的目标节点进行稳定性评分,得到基础稳定性评分;
第二评分模块对执行本次数据访问请求的目标节点的每次基础稳定性评分进行数据分析,得到所述执行本次数据访问请求的目标节点的历史稳定性评分,并对所述历史稳定性评分进行存储。
为了解决上述技术问题,本申请实施例还提供一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述数据访问请求的处理方法的步骤。
为了解决上述技术问题,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述数据访问请求的处理方法的步骤。
本发明实施例提供的数据访问请求的处理方法、装置、计算机设备及存储介质,在接收到客户端发送的数据访问请求时,获取客户端的IP地址,并基于IP地址,确定客户端的真实物理地址,按照预设的筛选条件,从集群服务器节点中,获取与真实物理地址距离对应的节点,作为候选节点,对每个候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点,基于动态均衡的方式,从有效节点中选取目标节点,并基于目标节点对数据访问请求进行响应。实现对不同来源的访问请求按地理位置进行快速分发,提高访问请求响应速度。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请的应用环境示意图;
图2是本申请的数据访问请求的处理方法的一个实施例的流程图;
图3是根据本申请的数据访问请求的处理装置的一个实施例的结构示意图;
图4是根据本申请的计算机设备的一个实施例的结构示意图。
具体实施方式
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同;本文中在申请的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本申请;本申请的说明书和权利要求书及上述附图说明中的术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。本申请的说明书和权利要求书或上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,如图1所示,***架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。
终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、MP3播放器(Moving Picture EpertsGroup Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving PictureEperts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器,例如对终端设备101、102、103上显示的页面提供支持的后台服务器。
需要说明的是,本申请实施例所提供的数据访问请求的处理方法由服务器执行,相应地,数据访问请求的处理装置设置于服务器中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器,本申请实施例中的终端设备101、102、103具体可以对应的是实际生产中的应用***。
请参阅图2,图2示出本发明实施例提供的一种数据访问请求的处理方法,详述如下:
S201:在接收到客户端发送的数据访问请求时,获取客户端的IP地址,并基于IP地址,确定客户端的真实物理地址。
S202:按照预设的筛选条件,从集群服务器节点中,获取与真实物理地址距离对应的节点,作为候选节点。
具体地,按照预设的筛选条件,从集群服务器节点中,获取与真实物理地址距离对应的节点,作为候选节点包括:
确定真实物理地址对应的地理区域,作为目标地理区域;
读取集群服务器节点中区域与目标地理区域对应的节点,作为初始节点;
获取每个初始节点的实际物理地址,并计算每个初始节点的实际物理地址与目标地理区域之间的距离区间;
将每个距离区间的中间值作为实际物理地址与目标地理区域的参考距离,并对参考距离进行由小到大的排序进行排序,得到距离序列;
从距离序列中从前往后选取预设数量的参考距离,作为目标参考距离;
将目标参考距离对应的节点,作为候选节点。
需要说明的是,在集群中存在多个节点(节点服务器),由于节点自身的一些管控策略和性能等因素,会进行动态的上线下线,因而,为确保后续数据访问请求分发和处理的有效,需要先对节点的状态进行判断,将节点状态为宕机或未激活的节点从候选节点中剔除,避免对后续筛选造成干扰。
其中,节点状态包括激活、宕机和未激活。
S203:对每个候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点。
具体地,对每个候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点包括:
针对每个候选节点,获取候选节点的节点参数信息,其中,节点参数信息包括节点吞吐量,数据包数量,请求数响应速度,延时和往返时延RTT中的至少一项;
基于节点参数信息和预设的权重,对每个候选节点进行健康计算,得到每个候选节点对应的健康分值;
将健康分值超过预设分值阈值的候选节点,确认为健康结果为健康的节点,并将检查结果为健康的节点,作为有效节点。
具体地,不同节点服务器由于其配置不同,以及当前的运行状态不同,导致其数据处理能力也不同,为避免节点服务器超负载运行导致服务器故障或者数据处理过程中的异常,需要通过节点服务器的当前运行状态,来计算出节点服务器当前可用于进行数据处理的资源状态,进而设定预设的权重。
其中,预设分值阈值可根据实际应用需要进行设定,此处不作具体限制。
S204:基于动态均衡的方式,从有效节点中选取目标节点,并基于目标节点对数据访问请求进行响应。
进一步地,基于动态均衡的方式,从有效节点中选取目标节点包括:
获取每个有效节点的历史稳定性评分;
针对每个有效节点,基于历史稳定性平和和健康分值,对有效节点进行综合评估,得到评估分值;
将评估分值最大的有效节点,作为目标节点。
进一步地,在获取每个有效节点的历史稳定性评分之前,数据访问请求的处理方法还包括:在每次数据访问请求处理完之后,对执行本次数据访问请求的目标节点进行稳定性评分,得到基础稳定性评分;
对执行本次数据访问请求的目标节点的每次基础稳定性评分进行数据分析,得到执行本次数据访问请求的目标节点的历史稳定性评分,并对历史稳定性评分进行存储。
本实施例中,在接收到客户端发送的数据访问请求时,获取客户端的IP地址,并基于IP地址,确定客户端的真实物理地址,按照预设的筛选条件,从集群服务器节点中,获取与真实物理地址距离对应的节点,作为候选节点,对每个候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点,基于动态均衡的方式,从有效节点中选取目标节点,并基于目标节点对数据访问请求进行响应。实现对不同来源的访问请求按地理位置进行快速分发,提高访问请求响应速度。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
图3示出与上述实施例数据访问请求的处理方法一一对应的数据访问请求的处理装置的原理框图。如图3所示,该数据访问请求的处理装置包括物理地址获取模块31、候选节点确定模块32、有效节点筛选模块33和访问请求响应模块34。各功能模块详细说明如下:
物理地址获取模块31,用于在接收到客户端发送的数据访问请求时,获取客户端的IP地址,并基于IP地址,确定客户端的真实物理地址;
候选节点确定模块32,用于按照预设的筛选条件,从集群服务器节点中,获取与真实物理地址距离对应的节点,作为候选节点;
有效节点筛选模块33,用于对每个候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点;
访问请求响应模块34,用于基于动态均衡的方式,从有效节点中选取目标节点,并基于目标节点对数据访问请求进行响应。
可选地,候选节点确定模块32包括:
地理区域确定单元,用于确定真实物理地址对应的地理区域,作为目标地理区域;
初始节点获取单元,用于读取集群服务器节点中区域与目标地理区域对应的节点,作为初始节点;
距离计算单元,用于获取每个初始节点的实际物理地址,并计算每个初始节点的实际物理地址与目标地理区域之间的距离区间;
距离排序单元,用于将每个距离区间的中间值作为实际物理地址与目标地理区域的参考距离,并对参考距离进行由小到大的排序进行排序,得到距离序列;
目标参考距离选取单元,用于从距离序列中从前往后选取预设数量的参考距离,作为目标参考距离;
候选节点确定单元,用于将目标参考距离对应的节点,作为候选节点。
可选地,有效节点筛选模块33包括:
节点参数信息获取单元,用于针对每个候选节点,获取候选节点的节点参数信息,其中,节点参数信息包括节点吞吐量,数据包数量,请求数响应速度,延时和往返时延RTT中的至少一项;
健康分值计算单元,用于基于节点参数信息和预设的权重,对每个候选节点进行健康计算,得到每个候选节点对应的健康分值;
有效节点确定单元,用于将健康分值超过预设分值阈值的候选节点,确认为健康结果为健康的节点,并将检查结果为健康的节点,作为有效节点。
可选地,访问请求响应模块34包括:
历史评分获取单元,用于获取每个有效节点的历史稳定性评分;
评分分值计算单元,用于针对每个有效节点,基于历史稳定性平和和健康分值,对有效节点进行综合评估,得到评估分值;
目标节点确定单元,用于将评估分值最大的有效节点,作为目标节点。
可选地,数据访问请求的处理装置还包括:
第一评分模块,用于在每次数据访问请求处理完之后,对执行本次数据访问请求的目标节点进行稳定性评分,得到基础稳定性评分;
第二评分模块对执行本次数据访问请求的目标节点的每次基础稳定性评分进行数据分析,得到执行本次数据访问请求的目标节点的历史稳定性评分,并对历史稳定性评分进行存储。
关于数据访问请求的处理装置的具体限定可以参见上文中对于数据访问请求的处理方法的限定,在此不再赘述。上述数据访问请求的处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
为解决上述技术问题,本申请实施例还提供计算机设备。具体请参阅图4,图4为本实施例计算机设备基本结构框图。
所述计算机设备4包括通过***总线相互通信连接存储器41、处理器42、网络接口43。需要指出的是,图中仅示出了具有组件连接存储器41、处理器42、网络接口43的计算机设备4,但是应理解的是,并不要求实施所有示出的组件,可以替代的实施更多或者更少的组件。其中,本技术领域技术人员可以理解,这里的计算机设备是一种能够按照事先设定或存储的指令,自动进行数值计算和/或信息处理的设备,其硬件包括但不限于微处理器、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程门阵列(Field-Programmable Gate Array,FPGA)、数字处理器(Digital Signal Processor,DSP)、嵌入式设备等。
所述计算机设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述计算机设备可以与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。
所述存储器41至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或D界面显示存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中,所述存储器41可以是所述计算机设备4的内部存储单元,例如该计算机设备4的硬盘或内存。在另一些实施例中,所述存储器41也可以是所述计算机设备4的外部存储设备,例如该计算机设备4上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。当然,所述存储器41还可以既包括所述计算机设备4的内部存储单元也包括其外部存储设备。本实施例中,所述存储器41通常用于存储安装于所述计算机设备4的操作***和各类应用软件,例如电子文件的控制的程序代码等。此外,所述存储器41还可以用于暂时地存储已经输出或者将要输出的各类数据。
所述处理器42在一些实施例中可以是中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器42通常用于控制所述计算机设备4的总体操作。本实施例中,所述处理器42用于运行所述存储器41中存储的程序代码或者处理数据,例如运行数据访问的程序代码。
所述网络接口43可包括无线网络接口或有线网络接口,该网络接口43通常用于在所述计算机设备4与其他电子设备之间建立通信连接。
本申请还提供了另一种实施方式,即提供一种计算机可读存储介质,所述计算机可读存储介质存储有数据访问程序,所述数据访问程序可被至少一个处理器执行,以使所述至少一个处理器执行如上述的数据访问请求的处理方法的步骤。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
显然,以上所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例,附图中给出了本申请的较佳实施例,但并不限制本申请的专利范围。本申请可以以许多不同的形式来实现,相反地,提供这些实施例的目的是使对本申请的公开内容的理解更加透彻全面。尽管参照前述实施例对本申请进行了详细的说明,对于本领域的技术人员来而言,其依然可以对前述各具体实施方式所记载的技术方案进行修改,或者对其中部分技术特征进行等效替换。凡是利用本申请说明书及附图内容所做的等效结构,直接或间接运用在其他相关的技术领域,均同理在本申请专利保护范围之内。
Claims (10)
1.一种数据访问请求的处理方法,应用于集群服务器中,其特征在于,所述数据访问请求的处理方法包括:
在接收到客户端发送的数据访问请求时,获取所述客户端的IP地址,并基于所述IP地址,确定客户端的真实物理地址;
按照预设的筛选条件,从集群服务器节点中,获取与所述真实物理地址距离对应的节点,作为候选节点;
对每个所述候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点;
基于动态均衡的方式,从所述有效节点中选取目标节点,并基于所述目标节点对所述数据访问请求进行响应。
2.如权利要求1所述的数据访问请求的处理方法,其特征在于,所述按照预设的筛选条件,从集群服务器节点中,获取与所述真实物理地址距离对应的节点,作为候选节点包括:
确定所述真实物理地址对应的地理区域,作为目标地理区域;
读取集群服务器节点中区域与所述目标地理区域对应的节点,作为初始节点;
获取每个所述初始节点的实际物理地址,并计算每个所述初始节点的实际物理地址与所述目标地理区域之间的距离区间;
将每个距离区间的中间值作为所述实际物理地址与所述目标地理区域的参考距离,并对所述参考距离进行由小到大的排序进行排序,得到距离序列;
从所述距离序列中从前往后选取预设数量的参考距离,作为目标参考距离;
将所述目标参考距离对应的节点,作为所述候选节点。
3.如权利要求1或2所述的数据访问请求的处理方法,其特征在于,所述对每个所述候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点包括:
针对每个所述候选节点,获取所述候选节点的节点参数信息,其中,所述节点参数信息包括节点吞吐量,数据包数量,请求数响应速度,延时和往返时延RTT中的至少一项;
基于所述节点参数信息和预设的权重,对每个所述候选节点进行健康计算,得到每个所述候选节点对应的健康分值;
将所述健康分值超过预设分值阈值的候选节点,确认为健康结果为健康的节点,并将检查结果为健康的节点,作为所述有效节点。
4.如权利要求3所述的数据访问请求的处理方法,其特征在于,所述基于动态均衡的方式,从所述有效节点中选取目标节点包括:
获取每个所述有效节点的历史稳定性评分;
针对每个所述有效节点,基于所述历史稳定性平和和所述健康分值,对所述有效节点进行综合评估,得到评估分值;
将评估分值最大的有效节点,作为所述目标节点。
5.如权利要求4所述的数据访问请求的处理方法,其特征在于,在所述获取每个所述有效节点的历史稳定性评分之前,所述数据访问请求的处理方法还包括:
在每次数据访问请求处理完之后,对执行本次数据访问请求的目标节点进行稳定性评分,得到基础稳定性评分;
对执行本次数据访问请求的目标节点的每次基础稳定性评分进行数据分析,得到所述执行本次数据访问请求的目标节点的历史稳定性评分,并对所述历史稳定性评分进行存储。
6.一种数据访问请求的处理装置,其特征在于,所述数据访问请求的处理装置包括:
物理地址获取模块,用于在接收到客户端发送的数据访问请求时,获取所述客户端的IP地址,并基于所述IP地址,确定客户端的真实物理地址;
候选节点确定模块,用于按照预设的筛选条件,从集群服务器节点中,获取与所述真实物理地址距离对应的节点,作为候选节点;
有效节点筛选模块,用于对每个所述候选节点进行健康检查,并将检查结果为健康的节点,作为有效节点;
访问请求响应模块,用于基于动态均衡的方式,从所述有效节点中选取目标节点,并基于所述目标节点对所述数据访问请求进行响应。
7.如权利要求6所述的数据访问请求的处理装置,其特征在于,所述候选节点确定模块包括:
地理区域确定单元,用于确定所述真实物理地址对应的地理区域,作为目标地理区域;
初始节点获取单元,用于读取集群服务器节点中区域与所述目标地理区域对应的节点,作为初始节点;
距离计算单元,用于获取每个所述初始节点的实际物理地址,并计算每个所述初始节点的实际物理地址与所述目标地理区域之间的距离区间;
距离排序单元,用于将每个距离区间的中间值作为所述实际物理地址与所述目标地理区域的参考距离,并对所述参考距离进行由小到大的排序进行排序,得到距离序列;
目标参考距离选取单元,用于从所述距离序列中从前往后选取预设数量的参考距离,作为目标参考距离;
候选节点确定单元,用于将所述目标参考距离对应的节点,作为所述候选节点。
8.如权利要求6所述的数据访问请求的处理装置,其特征在于,所述有效节点筛选模块包括:
节点参数信息获取单元,用于针对每个所述候选节点,获取所述候选节点的节点参数信息,其中,所述节点参数信息包括节点吞吐量,数据包数量,请求数响应速度,延时和往返时延RTT中的至少一项;
健康分值计算单元,用于基于所述节点参数信息和预设的权重,对每个所述候选节点进行健康计算,得到每个所述候选节点对应的健康分值;
有效节点确定单元,用于将所述健康分值超过预设分值阈值的候选节点,确认为健康结果为健康的节点,并将检查结果为健康的节点,作为所述有效节点。
9.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述的数据访问请求的处理方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述的数据访问请求的处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111188949.5A CN114095567B (zh) | 2021-10-12 | 2021-10-12 | 数据访问请求的处理方法、装置、计算机设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111188949.5A CN114095567B (zh) | 2021-10-12 | 2021-10-12 | 数据访问请求的处理方法、装置、计算机设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114095567A true CN114095567A (zh) | 2022-02-25 |
CN114095567B CN114095567B (zh) | 2023-12-29 |
Family
ID=80296900
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111188949.5A Active CN114095567B (zh) | 2021-10-12 | 2021-10-12 | 数据访问请求的处理方法、装置、计算机设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114095567B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114745565A (zh) * | 2022-04-14 | 2022-07-12 | 上海哔哩哔哩科技有限公司 | 边缘节点的调度方法及装置 |
CN114884944A (zh) * | 2022-04-28 | 2022-08-09 | 广东电网有限责任公司 | 一种数据处理方法、装置、设备和存储介质 |
CN115277566A (zh) * | 2022-05-20 | 2022-11-01 | 鸬鹚科技(深圳)有限公司 | 数据访问的负载均衡方法、装置、计算机设备及介质 |
CN116708035A (zh) * | 2023-08-07 | 2023-09-05 | 钛合联(深圳)科技有限公司 | 一种网络数据安全加密方法及*** |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000315200A (ja) * | 1998-09-24 | 2000-11-14 | Alteon Web Systems Inc | 分散されたロード平衡インターネットサーバ |
US8539080B1 (en) * | 2012-12-18 | 2013-09-17 | Microsoft Corporation | Application intelligent request management based on server health and client information |
US20160073271A1 (en) * | 2014-09-05 | 2016-03-10 | Verizon Patent And Licensing Inc. | System and method for providing extension of network coverage |
WO2017166803A1 (zh) * | 2016-03-30 | 2017-10-05 | 华为技术有限公司 | 一种资源调度方法及装置 |
US20190349834A1 (en) * | 2018-05-10 | 2019-11-14 | Telefonaktiebolaget Lm Ericsson (Publ) | QoS and Hop-Aware Adaptation Layer for Mutli-Hop Integrated Access Backhaul System |
CN110727499A (zh) * | 2019-09-18 | 2020-01-24 | 平安科技(深圳)有限公司 | 资源数据获取的方法、装置、计算机设备和存储介质 |
CN110856103A (zh) * | 2019-11-18 | 2020-02-28 | 腾讯科技(深圳)有限公司 | 一种调度方法、通信方法和相关设备 |
CN111064821A (zh) * | 2019-12-23 | 2020-04-24 | 北京达佳互联信息技术有限公司 | 边缘节点的ip地址的确定方法和装置 |
US20200177496A1 (en) * | 2017-10-17 | 2020-06-04 | Cloudminds (Shenzhen) Robotics Systems Co., Ltd. | Network path optimization method and system |
CN111857990A (zh) * | 2020-06-23 | 2020-10-30 | 苏州浪潮智能科技有限公司 | 一种加强yarn长类型服务调度的方法、*** |
WO2021120969A1 (zh) * | 2020-02-21 | 2021-06-24 | 聚好看科技股份有限公司 | 域名解析方法、域名解析服务器及终端设备 |
CN113181658A (zh) * | 2021-05-20 | 2021-07-30 | 腾讯科技(深圳)有限公司 | 一种边缘计算节点调度方法、装置、设备以及介质 |
CN113259428A (zh) * | 2021-05-11 | 2021-08-13 | 鸬鹚科技(深圳)有限公司 | 数据访问请求的处理方法、装置、计算机设备及介质 |
CN113282565A (zh) * | 2020-02-19 | 2021-08-20 | 广州虎牙科技有限公司 | 数据访问方法、装置、调度设备及存储介质 |
CN113315825A (zh) * | 2021-05-24 | 2021-08-27 | 康键信息技术(深圳)有限公司 | 分布式请求的处理方法、装置、设备及存储介质 |
-
2021
- 2021-10-12 CN CN202111188949.5A patent/CN114095567B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000315200A (ja) * | 1998-09-24 | 2000-11-14 | Alteon Web Systems Inc | 分散されたロード平衡インターネットサーバ |
US8539080B1 (en) * | 2012-12-18 | 2013-09-17 | Microsoft Corporation | Application intelligent request management based on server health and client information |
US20160073271A1 (en) * | 2014-09-05 | 2016-03-10 | Verizon Patent And Licensing Inc. | System and method for providing extension of network coverage |
WO2017166803A1 (zh) * | 2016-03-30 | 2017-10-05 | 华为技术有限公司 | 一种资源调度方法及装置 |
US20200177496A1 (en) * | 2017-10-17 | 2020-06-04 | Cloudminds (Shenzhen) Robotics Systems Co., Ltd. | Network path optimization method and system |
US20190349834A1 (en) * | 2018-05-10 | 2019-11-14 | Telefonaktiebolaget Lm Ericsson (Publ) | QoS and Hop-Aware Adaptation Layer for Mutli-Hop Integrated Access Backhaul System |
CN110727499A (zh) * | 2019-09-18 | 2020-01-24 | 平安科技(深圳)有限公司 | 资源数据获取的方法、装置、计算机设备和存储介质 |
CN110856103A (zh) * | 2019-11-18 | 2020-02-28 | 腾讯科技(深圳)有限公司 | 一种调度方法、通信方法和相关设备 |
CN111064821A (zh) * | 2019-12-23 | 2020-04-24 | 北京达佳互联信息技术有限公司 | 边缘节点的ip地址的确定方法和装置 |
CN113282565A (zh) * | 2020-02-19 | 2021-08-20 | 广州虎牙科技有限公司 | 数据访问方法、装置、调度设备及存储介质 |
WO2021120969A1 (zh) * | 2020-02-21 | 2021-06-24 | 聚好看科技股份有限公司 | 域名解析方法、域名解析服务器及终端设备 |
CN111857990A (zh) * | 2020-06-23 | 2020-10-30 | 苏州浪潮智能科技有限公司 | 一种加强yarn长类型服务调度的方法、*** |
CN113259428A (zh) * | 2021-05-11 | 2021-08-13 | 鸬鹚科技(深圳)有限公司 | 数据访问请求的处理方法、装置、计算机设备及介质 |
CN113181658A (zh) * | 2021-05-20 | 2021-07-30 | 腾讯科技(深圳)有限公司 | 一种边缘计算节点调度方法、装置、设备以及介质 |
CN113315825A (zh) * | 2021-05-24 | 2021-08-27 | 康键信息技术(深圳)有限公司 | 分布式请求的处理方法、装置、设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
SANG-WOONG LEE, ETAL.: "an energy-aware and predictive fuzzy logic-based routing scheme in flying ad hoc networks (FANETS)", 《IEEE ACCESS》, vol. 9 * |
袁江涛;张振宇;杨文忠;: "社会机会网络中基于节点相似性的信任转发算法", 计算机应用与软件, no. 09 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114745565A (zh) * | 2022-04-14 | 2022-07-12 | 上海哔哩哔哩科技有限公司 | 边缘节点的调度方法及装置 |
CN114745565B (zh) * | 2022-04-14 | 2023-10-20 | 上海哔哩哔哩科技有限公司 | 边缘节点的调度方法及装置 |
CN114884944A (zh) * | 2022-04-28 | 2022-08-09 | 广东电网有限责任公司 | 一种数据处理方法、装置、设备和存储介质 |
CN114884944B (zh) * | 2022-04-28 | 2024-04-30 | 广东电网有限责任公司 | 一种数据处理方法、装置、设备和存储介质 |
CN115277566A (zh) * | 2022-05-20 | 2022-11-01 | 鸬鹚科技(深圳)有限公司 | 数据访问的负载均衡方法、装置、计算机设备及介质 |
CN115277566B (zh) * | 2022-05-20 | 2024-03-22 | 鸬鹚科技(深圳)有限公司 | 数据访问的负载均衡方法、装置、计算机设备及介质 |
CN116708035A (zh) * | 2023-08-07 | 2023-09-05 | 钛合联(深圳)科技有限公司 | 一种网络数据安全加密方法及*** |
CN116708035B (zh) * | 2023-08-07 | 2023-10-03 | 钛合联(深圳)科技有限公司 | 一种网络数据安全加密方法及*** |
Also Published As
Publication number | Publication date |
---|---|
CN114095567B (zh) | 2023-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114095567B (zh) | 数据访问请求的处理方法、装置、计算机设备及介质 | |
CN109729131B (zh) | 一种应用请求的处理方法、装置和路由器 | |
CN115277566B (zh) | 数据访问的负载均衡方法、装置、计算机设备及介质 | |
CN111163072B (zh) | 机器学习模型中特征值的确定方法、装置及电子设备 | |
CN113259428A (zh) | 数据访问请求的处理方法、装置、计算机设备及介质 | |
CN113890879B (zh) | 数据访问的负载均衡方法、装置、计算机设备及介质 | |
CN113986564A (zh) | 应用数据的流量监控方法、装置、计算机设备及介质 | |
CN113259342A (zh) | 登录验证方法、装置、计算机设备及介质 | |
CN110807050B (zh) | 性能分析方法、装置、计算机设备及存储介质 | |
CN110677506A (zh) | 网络访问方法、装置、计算机设备及存储介质 | |
CN113220367A (zh) | 小程序的运行方法、装置、电子设备及存储介质 | |
WO2023066258A1 (zh) | 隐私数据的数据处理方法、装置、计算机设备及介质 | |
CN114124883B (zh) | 基于云存储地址的数据访问方法、装置、计算机设备及介质 | |
CN111767481A (zh) | 访问处理方法、装置、设备和存储介质 | |
CN115470399A (zh) | 一种基于大数据的id打通方法、装置、设备和存储介质 | |
CN113242302A (zh) | 数据访问请求的处理方法、装置、计算机设备及介质 | |
CN113239396A (zh) | 数据访问***、方法、装置、计算机设备及介质 | |
CN114138401A (zh) | 基于人工智能的容器配置方法、装置、设备及介质 | |
CN114389969A (zh) | 客户端的测试方法、装置、电子设备和存储介质 | |
CN103051607B (zh) | 访问方法、设备及*** | |
CN113590352A (zh) | 一种数据调用方法、装置、设备及可读存储介质 | |
CN112632192A (zh) | 节点维护方法、装置、计算机设备及介质 | |
CN110719260B (zh) | 智能网络安全分析方法、装置及计算机可读存储介质 | |
CN111327513B (zh) | 消息数据的推送方法、装置、计算机设备及存储介质 | |
CN111475289B (zh) | 负载均衡方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |