CN108111623A - 一种基于内容分发网络cdn的通信方法和装置 - Google Patents

一种基于内容分发网络cdn的通信方法和装置 Download PDF

Info

Publication number
CN108111623A
CN108111623A CN201711485113.5A CN201711485113A CN108111623A CN 108111623 A CN108111623 A CN 108111623A CN 201711485113 A CN201711485113 A CN 201711485113A CN 108111623 A CN108111623 A CN 108111623A
Authority
CN
China
Prior art keywords
node
cluster
nodes
access request
online
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711485113.5A
Other languages
English (en)
Inventor
马长征
杨磊
黄莹
温源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Qihoo Technology Co Ltd
Original Assignee
Beijing Qihoo Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Qihoo Technology Co Ltd filed Critical Beijing Qihoo Technology Co Ltd
Priority to CN201711485113.5A priority Critical patent/CN108111623A/zh
Publication of CN108111623A publication Critical patent/CN108111623A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/566Grouping or aggregating service requests, e.g. for unified processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明实施例提供了一种基于内容分发网络CDN的通信方法和装置,在内容分发网络具有多个节点,部分节点组成集群,该方法包括:在当前节点中接收访问请求;在所述集群中分配处理所述访问请求的目标节点;通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;通过所述连接接收所述目标节点返回的所述操作结果;依据所述操作结果返回访问结果。通过在内容分发网络中部分节点组成小范围的集群,实现了集群内节点与节点之间的通信连接,无需使用组播的方式进行通信,大大提高了通信的灵活性。

Description

一种基于内容分发网络CDN的通信方法和装置
技术领域
本发明涉及通信技术领域,特别是涉及一种基于内容分发网络CDN的通信方法和一种基于内容分发网络CDN的通信装置。
背景技术
在网站中经常使用CDN(Content Delivery Network,内容分发网络)对数据进行传输,CDN是通过在现有的网络中增加一层新的网络结构,部署有多个节点,用于缓存数据,使用户可以将数据传输到就近的节点上或从就近的节点获取所需的数据,提供相应的服务。
目前,在CDN的各节点之间使用组播,广播数据包实现集群内部的通信,通信灵活性较低。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种基于内容分发网络CDN的通信方法和相应的一种基于内容分发网络CDN的通信装置。
依据本发明的一个方面,提供了一种基于内容分发网络CDN的通信方法,在内容分发网络具有多个节点,部分节点组成集群,包括:
在当前节点中接收访问请求;
在所述集群中分配处理所述访问请求的目标节点;
通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;
通过所述连接接收所述目标节点返回的所述操作结果;
依据所述操作结果返回访问结果。
可选地,还包括:
查找预设的配置文件,所述配置文件记载在所述集群中节点的节点标识;
将所述节点标识加载至内存中。
可选地,还包括:
在当前节点中通过传输控制协议TCP与所述节点标识对应的节点建立连接。
可选地,还包括:
在当前节点中通过所述连接向所述集群中的其他节点发送心跳信息;
通过所述心跳信息确定所述集群中的其他节点的状态;
当所述状态为在线时,保持所述集群中的其他节点在所述内存中的节点标识;
当所述状态为离线时,删除所述集群中的其他节点在所述内存中的节点标识。
可选地,还包括:
在所述集群中增加新的节点时,在所述配置文件中增加所述新的节点的节点标识;
在所述集群中删除原有的节点时,在所述配置文件中删除所述原有的节点的节点标识。
可选地,所述在所述集群中分配处理所述访问请求的目标节点,包括:
从所述访问请求中提取访问地址;
确定所述集群中在线的节点;
按照所述访问地址将从所述在线的节点中分配目标节点。
可选地,所述确定所述集群中在线的节点,包括:
在内存中查找节点标识;
确定所述节点标识对应的节点为在线的节点。
可选地,所述按照所述访问地址将从所述在线的节点中分配目标节点,包括:
统计所述集群中在线的节点的数量;
对所述访问地址计算哈希值,并对所述数量取余数;
确定所述余数对应的节点为目标节点。
可选地,所述内容分发网络CDN包括中心节点、父层节点、边缘节点;
所述中心节点与源网站进行通信;
所述父层节点之间相互通信,与所述中心节点或者源网站进行通信,以及,与所述边缘节点进行通信;
所述边缘节点用于与客户端进行通信;
其中,部分所述父层节点组成集群,和/或,部分所述边缘节点组成集群。
根据本发明的另一方面,提供了一种基于内容分发网络CDN的通信装置,在内容分发网络具有多个节点,部分节点组成集群,包括:
访问请求接收模块,用于在当前节点中接收访问请求;
目标节点分配模块,用于在所述集群中分配处理所述访问请求的目标节点;
操作指令发送模块,用于通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;
操作结果接收模块,用于通过所述连接接收所述目标节点返回的所述操作结果;
访问结果返回模块,用于依据所述操作结果返回访问结果。
可选地,还包括:
配置文件查找模块,用于查找预设的配置文件,所述配置文件记载在所述集群中节点的节点标识;
节点标识加载模块,用于将所述节点标识加载至内存中。
可选地,还包括:
连接建立模块,用于在当前节点中通过传输控制协议TCP与所述节点标识对应的节点建立连接。
可选地,还包括:
心跳信息发送模块,用于在当前节点中通过所述连接向所述集群中的其他节点发送心跳信息;
状态确定模块,用于通过所述心跳信息确定所述集群中的其他节点的状态;
节点标识保持模块,用于当所述状态为在线时,保持所述集群中的其他节点在所述内存中的节点标识;
节点标识删除模块,用于当所述状态为离线时,删除所述集群中的其他节点在所述内存中的节点标识。
可选地,还包括:
配置文件增加模块,用于在所述集群中增加新的节点时,在所述配置文件中增加所述新的节点的节点标识;
配置文件删除模块,用于在所述集群中删除原有的节点时,在所述配置文件中删除所述原有的节点的节点标识。
可选地,所述目标节点分配模块包括:
访问地址提取子模块,用于从所述访问请求中提取访问地址;
在线节点确定子模块,用于确定所述集群中在线的节点;
在线节点分配子模块,用于按照所述访问地址将从所述在线的节点中分配目标节点。
可选地,所述在线节点确定子模块包括:
内存查找单元,用于在内存中查找节点标识;
节点标识确定单元,用于确定所述节点标识对应的节点为在线的节点。
可选地,所述在线节点分配子模块包括:
数量统计单元,用于统计所述集群中在线的节点的数量;
哈希取余单元,用于对所述访问地址计算哈希值,并对所述数量取余数;
目标节点确定单元,用于确定所述余数对应的节点为目标节点。
可选地,所述内容分发网络CDN包括中心节点、父层节点、边缘节点;
所述中心节点与源网站进行通信;
所述父层节点之间相互通信,与所述中心节点或者源网站进行通信,以及,与所述边缘节点进行通信;
所述边缘节点用于与客户端进行通信;
其中,部分所述父层节点组成集群,和/或,部分所述边缘节点组成集群。
在本发明实施例中,内容分发网络具有多个节点,部分节点组成集群,在集群的当前节点中接收访问请求,在该集群中分配处理访问请求的目标节点,通过预设的连接向目标节点发送操作指令,以对访问请求进行操作,并获得操作结果,通过连接接收目标节点返回的操作结果,依据操作结果返回访问结果,通过在内容分发网络中部分节点组成小范围的集群,实现了集群内节点与节点之间的通信连接,无需使用组播的方式进行通信,大大提高了通信的灵活性。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明一个实施例的一种基于内容分发网络CDN的通信方法实施例的步骤示意流程图;
图2示出了根据本发明一个实施例的一种内容分发网络CDN的结构示意图;
图3示出了根据本发明一个实施例的另一种基于内容分发网络CDN的通信方法实施例的步骤示意流程图;以及
图4示出了根据本发明一个实施例的一种基于内容分发网络CDN的通信装置实施例的结构示意框图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
参照图1,示出了根据本发明一个实施例的一种基于内容分发网络CDN的通信方法实施例的步骤示意流程图,具体可以包括如下步骤:
步骤101,在当前节点中接收访问请求。
在内容分发网络CDN中,通常具有多个用于传输、缓存数据(如直播流、缓存数据等)的节点,在某个节点接收到客户端、源网站的数据(如直播流、缓存数据等)之后,可以推送至其他节点,在用户访问数据(如直播流、缓存数据等)的时候,通过调度将用户的请求路由或者引导到离用户接入网络最近或者访问效果最佳的节点上,由该节点为用户提供数据(如直播流、缓存数据等);相对于直接访问源网站,这种方式缩短了用户和数据(如直播流、缓存数据等)之间的网络距离,从而达到加速的效果。
需要说明的是,在不同的内容分发网络CDN中,拓扑结构可能有所不同。
在一种实施方式中,内容分发网络CDN的多个节点包括中心节点、父层节点、边缘节点。
在某些情况下,中心节点为资源的超汇聚节点,可以与源网站进行通信,汇聚了大量源网站的资源,这些资源一般为变化较少的资源,例如,视频、图片等等。
在某些情况下,中心节点仅保存文件信息,如URL(Uniform Resource Locator,统一资源定位符)、大小等,并不直接缓存文件,内容分发网络CDN中的其他节点从该中心节点中获取待缓存的文件的文件信息,在缓存完该文件之后,上报至中心节点,中心节点统计出其他节点缓存的文件。
需要说明的是,在某些内容分发网络CDN中可以部署中心节点,即该部分内容分发网络CDN为中心节点-父层节点-边缘节点的三层结构,在某些内容分发网络CDN中可以不部署中心节点,即该部分内容分发网络CDN为父层节点-边缘节点的二层结构,本发明实施例对此不加以限制。
父层节点为资源的次汇聚节点,一方面,由于在内容分发网络CDN内部,各节点之间一般使用双向光纤等专有的通信线缆进行通信,中心节点与父层节点之间的通信质量有较高的保障,在获取变化较少的资源、外部源网站通信质量较差等情况下,可以与中心节点进行通信,从中心节点获取资源,另一方面,在获取新的资源、进行数据操作(如支付)等情况下,可以与源网站进行通信,从源网站获取资源。
再者,父层节点之间可以相互通信,从而组成父层节点与边缘节点之间的传输路径,即一个节点到另一个节点所经过的中间传输的节点及通信线缆所组成的路径。
具体而言,选取传输路径的方式可以有多种,可以根据实际需求选择如下至少一种方式:
1、选取传输性能符合设定的要求的传输路径。
传输性能是指传输流数据的传输路径的传输能力,可以根据节点间的距离、传输速度、数据丢失率、阻塞状况等确定传输路径的传输性能,通过定期更新每两个节点间的传输性能,根据节点之间的各传输路径的传输性能,选取其中传输性能符合要求或传输性能最好的传输路径。
2、选取经过的节点数量最少的传输路径。
在多条传输路径中选取节点数量最少的传输路径,这样,就可以占用最少的传输资源完成数据从一个节点到另一个节点的传输。
3、选取在一段时间内没有选择过的传输路径。
如果历史上有流数据从一个节点传输至另一个节点,那么,当有新的数据要从这两个之间进行传输,可以在一段时间内没有选择过的各传输路径中选取一条,以避免一直选取同一条传输路径导致该传输路径上的节点负载过重。
当然,上述传输路径的选取方式只是作为示例,在实施本发明实施例时,可以根据实际情况设置其他传输路径的选取方式,本发明实施例对此不加以限制。另外,除了上述传输路径的选取方式外,本领域技术人员还可以根据实际需要采用其它传输路径的选取方式,本发明实施例对此也不加以限制。
此外,父层节点一般部署有多个运营商的机房,机房之间通过双线光线等专有的通信线缆进行连接,边缘节点一般是部署在某个运营商的网络中,同运营商之间的父层节点的机房可以与边缘节点进行通信。
边缘节点之间具有相互通信的能力,但是,一般情况下,不会直接进行通信。
边缘节点可以接入客户端,例如,手机、平板电脑、电视等等,用于与客户端进行通信,如获取其采集的直播流,或者,将直播流推送至该客户端。
为使本领域技术人员更好地理解本发明实施例,以下通过具体的示例来说明本发明实施例中的内容分发网络CDN。
如图2所示,父层节点为A1、A2、A3、A4,可以按照地理位置进行部署,例如,A1部署在北京、A2部署在上海、A3部署在广州,A4部署在郑州,A1可以与A2进行通信,A2可以与A3进行通信,A3可以与A4进行通信,A4可以与A1进行通信,父层节点之间的循环通信,可以组成环状的父层结构。
此外,每个父层节点可以连接一个或多个边缘节点,边缘节点也可以按照地理位置、运营商等因素进行部署,边缘节点之间一般不直接进行通信,而是经过父层节点进行中转,父层节点A1连接边缘节点A11、A12,父层节点A2连接缘节点A21、A22,父层节点A3连接缘节点A31、A32、A33,父层节点A4连接缘节点A41、A42、A43。
边缘节点接入客户端,如边缘节点A32接入客户端B1,用于接收客户端的数据(如直播流),或者,将数据(如直播流)发送至该客户端。
在本发明实施例中,部分节点可以组成集群,集群内的节点可以相互之间进行连接、通信。
在上述内容分发网络CDN中,部分父层节点可以组成集群,和/或,部分边缘节点可以组成集群。
此外,若当前节点为边缘节点,则可以接收客户端的访问请求,若当前节点为父层节点,则可以接收边缘节点的访问请求。
步骤102,在所述集群中分配处理所述访问请求的目标节点。
在具体实现中,当前节点可以可以按照一定的分配规则,在同一个集群的节点中选择其中一个节点作为处理该访问请求的目标节点。
需要说明的是,该目标节点可以为当前节点,也可以为除当前节点外的其他节点,本发明实施例对此不加以限制。
在本发明的一个实施例中,步骤102可以包括如下子步骤:
子步骤S11,从所述访问请求中提取访问地址。
在具体实现中,可以从访问请求中提取待访问的资源的访问地址,如URL(UniformResource Locator,统一资源定位符)。
子步骤S12,确定所述集群中在线的节点。
由于节点发生故障、网络通信质量较差等原因,对于当前节点而言,可能存在部分节点无法联系的情况,对于这部分节点,可以称之为离线的节点,反之,其他可联系的节点可以称之为在线的节点。
在具体实现中,当前节点可以在内存中维护在线的节点,因此,可以在内存中查找节点标识,如节点ID、主机名等,确定节点标识对应的节点为在线的节点。
子步骤S13,按照所述访问地址将从所述在线的节点中分配目标节点。
筛选出集群中在线的节点,则可以按照该访问地址分配至其中一个在线的节点,作为目标节点。
在一个示例中,可以统计集群中在线的节点的数量,对访问地址计算哈希值,并对所述数量取余数,确定余数对应的节点为目标节点。
在此示例中,是将一个完整的访问地址(如URL)经过哈希运算key=HASH($URL)%N(N是在线的节点的数量)得到一个key值,具有相同key值的URL也就是访问请求将会发往同一台节点,比如,key=0发往第1个在线的节点、key=1发往第2个在线的节点,等等。
当然,上述分配目标节点的方式只是作为示例,在实施本发明实施例时,可以根据实际情况设置其他分配目标节点的方式,如随机分配,本发明实施例对此不加以限制。另外,除了上述分配目标节点的方式外,本领域技术人员还可以根据实际需要采用其它分配目标节点的方式,本发明实施例对此也不加以限制。
步骤103,通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果。
应用本发明实施例中,集群的节点与节点之间,可以预先建立TCP(TransmissionControl Protocol,传输控制协议)连接。
当前节点可以生成操作指令,通过该连接发送至目标节点。
目标节点按照该操作指令对该访问请求进行操作,生成操作结果,如直接从目标节点本地提取缓存的数据、通过回源操作获取数据,等等。
步骤104,通过所述连接接收所述目标节点返回的所述操作结果。
目标节点将该操作结果通过与当前节点的连接,发送至当前节点。
步骤105,依据所述操作结果返回访问结果。
当前节点在接收到目标节点的操作结果之后,则可以生成访问结果,对访问请求进行响应。
在上述内容分发网络CDN中,若当前节点为边缘节点,则可以将访问结果返回客户端;若当前节点为父层节点,则可以将访问结果返回边缘节点。
在本发明实施例中,内容分发网络具有多个节点,部分节点组成集群,在集群的当前节点中接收访问请求,在该集群中分配处理访问请求的目标节点,通过预设的连接向目标节点发送操作指令,以对访问请求进行操作,并获得操作结果,通过连接接收目标节点返回的操作结果,依据操作结果返回访问结果,通过在内容分发网络中部分节点组成小范围的集群,实现了集群内节点与节点之间的通信连接,无需使用组播的方式进行通信,大大提高了通信的灵活性。
参照图3,示出了根据本发明一个实施例的另一种基于内容分发网络CDN的通信方法实施例的步骤示意流程图,具体可以包括如下步骤:
步骤301,查找预设的配置文件。
在具体实现中,配置文件记载了在同一个集群中节点的节点标识。
在集群中增加新的节点时,在该配置文件中增加新的节点的节点标识。
在集群中删除原有的节点时,在该配置文件中删除原有的节点的节点标识。
步骤302,将所述节点标识加载至内存中。
当前节点将配置文件中的节点标识加载至内存中,方便后续对集群中的节点进行维护。
步骤303,在当前节点中通过传输控制协议TCP与所述节点标识对应的节点建立连接。
为实现数据的可靠传输,TCP要在应用进程间建立传输连接,它是在两个传输用户之间建立一种逻辑联系,使得通信双方都确认对方为自己的传输连接端点。
建立连接前,作为服务器端的节点首先被动打开其熟知的端口,对端口进行侦听。作为客户端的节点要和作为服务器端的节点建立连接时,发起一个主动打开端口的请求(该端口一般为临时端口),然后进入三次握手的过程。
三次握手的过程:
1、A的TCP向B发出连接请求报文段,其首部中的同步比特SYN应置为1,并选择序号x,表明传送数据时的第一个数据字节的序号是x(设置初始段序号SEQ=x,例如SEQ=26500)。
2、B的TCP收到连接请求报文段后,如同意,则发回确认。
B在确认报文段中应将SYN置为1,其确认号ACK应为x+1(ACK26 501),同时也给出自己的选择序号y(设置初始段序号SEQ=y,例如SEQ=29 010)。
3、A收到此报文段后,向B给出确认,其确认号应为y+1(ACK=29011)。
A的TCP通知上层应用进程,连接已经建立。
当运行服务器进程的主机B的TCP收到主机A的确认后,也通知其上层应用进程,连接已经建立。
由于客户对报文段进行了编号,它知道哪些序号是期待的,哪些序号是过时的。当客户发现报文段的序号是一个过时的序号时,就会拒绝该报文段,这样就不会造成重复连接。
数据传输结束后,通信双方都可以释放连接。
步骤304,在当前节点中通过所述连接向所述集群中的其他节点发送心跳信息。
步骤305,通过所述心跳信息确定所述集群中的其他节点的状态。
步骤306,当所述状态为在线时,保持所述集群中的其他节点在所述内存中的节点标识。
步骤307,当所述状态为离线时,删除所述集群中的其他节点在所述内存中的节点标识。
在本发明实施例中,集群中的节点与节点之间可以通过TCP连接维持心跳,当前节点可以通过心跳主动对集群中的其他节点进行探活。
如果可以持续接收到其他节点的心跳信息,则可以认为该节点在线,在内存中保持该节点的节点标识。
如果经过一段时间未接收到其他节点的心跳信息,则可以认为该节点离线,在内存中删除该节点的节点标识。
对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图4,示出了根据本发明一个实施例的一种基于内容分发网络CDN的通信装置实施例的结构示意框图,在内容分发网络具有多个节点,部分节点组成集群,具体可以包括如下模块:
访问请求接收模块401,用于在当前节点中接收访问请求;
目标节点分配模块402,用于在所述集群中分配处理所述访问请求的目标节点;
操作指令发送模块403,用于通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;
操作结果接收模块404,用于通过所述连接接收所述目标节点返回的所述操作结果;
访问结果返回模块405,用于依据所述操作结果返回访问结果。
在本发明的一个实施例中,还包括:
配置文件查找模块,用于查找预设的配置文件,所述配置文件记载在所述集群中节点的节点标识;
节点标识加载模块,用于将所述节点标识加载至内存中。
在本发明的一个实施例中,还包括:
连接建立模块,用于在当前节点中通过传输控制协议TCP与所述节点标识对应的节点建立连接。
在本发明的一个实施例中,还包括:
心跳信息发送模块,用于在当前节点中通过所述连接向所述集群中的其他节点发送心跳信息;
状态确定模块,用于通过所述心跳信息确定所述集群中的其他节点的状态;
节点标识保持模块,用于当所述状态为在线时,保持所述集群中的其他节点在所述内存中的节点标识;
节点标识删除模块,用于当所述状态为离线时,删除所述集群中的其他节点在所述内存中的节点标识。
在本发明的一个实施例中,还包括:
配置文件增加模块,用于在所述集群中增加新的节点时,在所述配置文件中增加所述新的节点的节点标识;
配置文件删除模块,用于在所述集群中删除原有的节点时,在所述配置文件中删除所述原有的节点的节点标识。
在本发明的一个实施例中,所述目标节点分配模块402包括:
访问地址提取子模块,用于从所述访问请求中提取访问地址;
在线节点确定子模块,用于确定所述集群中在线的节点;
在线节点分配子模块,用于按照所述访问地址将从所述在线的节点中分配目标节点。
在本发明的一个实施例中,所述在线节点确定子模块包括:
内存查找单元,用于在内存中查找节点标识;
节点标识确定单元,用于确定所述节点标识对应的节点为在线的节点。
在本发明的一个实施例中,所述在线节点分配子模块包括:
数量统计单元,用于统计所述集群中在线的节点的数量;
哈希取余单元,用于对所述访问地址计算哈希值,并对所述数量取余数;
目标节点确定单元,用于确定所述余数对应的节点为目标节点。
在本发明的一个实施例中,所述内容分发网络CDN包括中心节点、父层节点、边缘节点;
所述中心节点与源网站进行通信;
所述父层节点之间相互通信,与所述中心节点或者源网站进行通信,以及,与所述边缘节点进行通信;
所述边缘节点用于与客户端进行通信;
其中,部分所述父层节点组成集群,和/或,部分所述边缘节点组成集群。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
在此提供的算法和显示不与任何特定计算机、虚拟***或者其它设备固有相关。各种通用***也可以与基于在此的示教一起使用。根据上面的描述,构造这类***所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的基于内容分发网络CDN的通信设备中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明实施例公开了A1、一种基于内容分发网络CDN的通信方法,在内容分发网络具有多个节点,部分节点组成集群,包括:
在当前节点中接收访问请求;
在所述集群中分配处理所述访问请求的目标节点;
通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;
通过所述连接接收所述目标节点返回的所述操作结果;
依据所述操作结果返回访问结果。
A2、如A1所述的方法,还包括:
查找预设的配置文件,所述配置文件记载在所述集群中节点的节点标识;
将所述节点标识加载至内存中。
A3、如A2所述的方法,还包括:
在当前节点中通过传输控制协议TCP与所述节点标识对应的节点建立连接。
A4、如A3所述的方法,还包括:
在当前节点中通过所述连接向所述集群中的其他节点发送心跳信息;
通过所述心跳信息确定所述集群中的其他节点的状态;
当所述状态为在线时,保持所述集群中的其他节点在所述内存中的节点标识;
当所述状态为离线时,删除所述集群中的其他节点在所述内存中的节点标识。
A5、如A2所述的方法,还包括:
在所述集群中增加新的节点时,在所述配置文件中增加所述新的节点的节点标识;
在所述集群中删除原有的节点时,在所述配置文件中删除所述原有的节点的节点标识。
A6、如A1-A5任一项所述的方法,所述在所述集群中分配处理所述访问请求的目标节点,包括:
从所述访问请求中提取访问地址;
确定所述集群中在线的节点;
按照所述访问地址将从所述在线的节点中分配目标节点。
A7、如A6所述的方法,所述确定所述集群中在线的节点,包括:
在内存中查找节点标识;
确定所述节点标识对应的节点为在线的节点。
A8、如A6所述的方法,所述按照所述访问地址将从所述在线的节点中分配目标节点,包括:
统计所述集群中在线的节点的数量;
对所述访问地址计算哈希值,并对所述数量取余数;
确定所述余数对应的节点为目标节点。
A9、如A1-A5任一项所述的方法,所述内容分发网络CDN包括中心节点、父层节点、边缘节点;
所述中心节点与源网站进行通信;
所述父层节点之间相互通信,与所述中心节点或者源网站进行通信,以及,与所述边缘节点进行通信;
所述边缘节点用于与客户端进行通信;
其中,部分所述父层节点组成集群,和/或,部分所述边缘节点组成集群。
本发明实施例还公开了B10、一种基于内容分发网络CDN的通信装置,在内容分发网络具有多个节点,部分节点组成集群,包括:
访问请求接收模块,用于在当前节点中接收访问请求;
目标节点分配模块,用于在所述集群中分配处理所述访问请求的目标节点;
操作指令发送模块,用于通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;
操作结果接收模块,用于通过所述连接接收所述目标节点返回的所述操作结果;
访问结果返回模块,用于依据所述操作结果返回访问结果。
B11、如B10所述的装置,还包括:
配置文件查找模块,用于查找预设的配置文件,所述配置文件记载在所述集群中节点的节点标识;
节点标识加载模块,用于将所述节点标识加载至内存中。
B12、如B11所述的装置,还包括:
连接建立模块,用于在当前节点中通过传输控制协议TCP与所述节点标识对应的节点建立连接。
B13、如B12所述的装置,还包括:
心跳信息发送模块,用于在当前节点中通过所述连接向所述集群中的其他节点发送心跳信息;
状态确定模块,用于通过所述心跳信息确定所述集群中的其他节点的状态;
节点标识保持模块,用于当所述状态为在线时,保持所述集群中的其他节点在所述内存中的节点标识;
节点标识删除模块,用于当所述状态为离线时,删除所述集群中的其他节点在所述内存中的节点标识。
B14、如B11所述的装置,还包括:
配置文件增加模块,用于在所述集群中增加新的节点时,在所述配置文件中增加所述新的节点的节点标识;
配置文件删除模块,用于在所述集群中删除原有的节点时,在所述配置文件中删除所述原有的节点的节点标识。
B15、如B10-B14任一项所述的装置,所述目标节点分配模块包括:
访问地址提取子模块,用于从所述访问请求中提取访问地址;
在线节点确定子模块,用于确定所述集群中在线的节点;
在线节点分配子模块,用于按照所述访问地址将从所述在线的节点中分配目标节点。
B16、如B15所述的装置,所述在线节点确定子模块包括:
内存查找单元,用于在内存中查找节点标识;
节点标识确定单元,用于确定所述节点标识对应的节点为在线的节点。
B17、如B15所述的装置,所述在线节点分配子模块包括:
数量统计单元,用于统计所述集群中在线的节点的数量;
哈希取余单元,用于对所述访问地址计算哈希值,并对所述数量取余数;
目标节点确定单元,用于确定所述余数对应的节点为目标节点。
B18、如B10-B14任一项所述的装置,所述内容分发网络CDN包括中心节点、父层节点、边缘节点;
所述中心节点与源网站进行通信;
所述父层节点之间相互通信,与所述中心节点或者源网站进行通信,以及,与所述边缘节点进行通信;
所述边缘节点用于与客户端进行通信;
其中,部分所述父层节点组成集群,和/或,部分所述边缘节点组成集群。

Claims (10)

1.一种基于内容分发网络CDN的通信方法,在内容分发网络具有多个节点,部分节点组成集群,包括:
在当前节点中接收访问请求;
在所述集群中分配处理所述访问请求的目标节点;
通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;
通过所述连接接收所述目标节点返回的所述操作结果;
依据所述操作结果返回访问结果。
2.如权利要求1所述的方法,其特征在于,还包括:
查找预设的配置文件,所述配置文件记载在所述集群中节点的节点标识;
将所述节点标识加载至内存中。
3.如权利要求2所述的方法,其特征在于,还包括:
在当前节点中通过传输控制协议TCP与所述节点标识对应的节点建立连接。
4.如权利要求3所述的方法,其特征在于,还包括:
在当前节点中通过所述连接向所述集群中的其他节点发送心跳信息;
通过所述心跳信息确定所述集群中的其他节点的状态;
当所述状态为在线时,保持所述集群中的其他节点在所述内存中的节点标识;
当所述状态为离线时,删除所述集群中的其他节点在所述内存中的节点标识。
5.如权利要求2所述的方法,其特征在于,还包括:
在所述集群中增加新的节点时,在所述配置文件中增加所述新的节点的节点标识;
在所述集群中删除原有的节点时,在所述配置文件中删除所述原有的节点的节点标识。
6.如权利要求1-5任一项所述的方法,其特征在于,所述在所述集群中分配处理所述访问请求的目标节点,包括:
从所述访问请求中提取访问地址;
确定所述集群中在线的节点;
按照所述访问地址将从所述在线的节点中分配目标节点。
7.如权利要求6所述的方法,其特征在于,所述确定所述集群中在线的节点,包括:
在内存中查找节点标识;
确定所述节点标识对应的节点为在线的节点。
8.如权利要求6所述的方法,其特征在于,所述按照所述访问地址将从所述在线的节点中分配目标节点,包括:
统计所述集群中在线的节点的数量;
对所述访问地址计算哈希值,并对所述数量取余数;
确定所述余数对应的节点为目标节点。
9.如权利要求1-5任一项所述的方法,其特征在于,所述内容分发网络CDN包括中心节点、父层节点、边缘节点;
所述中心节点与源网站进行通信;
所述父层节点之间相互通信,与所述中心节点或者源网站进行通信,以及,与所述边缘节点进行通信;
所述边缘节点用于与客户端进行通信;
其中,部分所述父层节点组成集群,和/或,部分所述边缘节点组成集群。
10.一种基于内容分发网络CDN的通信装置,在内容分发网络具有多个节点,部分节点组成集群,包括:
访问请求接收模块,用于在当前节点中接收访问请求;
目标节点分配模块,用于在所述集群中分配处理所述访问请求的目标节点;
操作指令发送模块,用于通过预设的连接向所述目标节点发送操作指令,以对所述访问请求进行操作,并获得操作结果;
操作结果接收模块,用于通过所述连接接收所述目标节点返回的所述操作结果;
访问结果返回模块,用于依据所述操作结果返回访问结果。
CN201711485113.5A 2017-12-29 2017-12-29 一种基于内容分发网络cdn的通信方法和装置 Pending CN108111623A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711485113.5A CN108111623A (zh) 2017-12-29 2017-12-29 一种基于内容分发网络cdn的通信方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711485113.5A CN108111623A (zh) 2017-12-29 2017-12-29 一种基于内容分发网络cdn的通信方法和装置

Publications (1)

Publication Number Publication Date
CN108111623A true CN108111623A (zh) 2018-06-01

Family

ID=62214980

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711485113.5A Pending CN108111623A (zh) 2017-12-29 2017-12-29 一种基于内容分发网络cdn的通信方法和装置

Country Status (1)

Country Link
CN (1) CN108111623A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109067898A (zh) * 2018-08-24 2018-12-21 山东浪潮商用***有限公司 一种通过文件散列分布降低内容分发网络边缘节点回源率的方法
CN111565207A (zh) * 2019-02-13 2020-08-21 ***通信有限公司研究院 内容分发网络的控制方法、装置及计算机可读存储介质
CN114205260A (zh) * 2021-11-08 2022-03-18 南方电网深圳数字电网研究院有限公司 基于go语言的tcp连接探活方法及装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101640684A (zh) * 2009-08-21 2010-02-03 中国电信股份有限公司 内容分发方法、网络***、gslb设备和域名服务器
CN102148752A (zh) * 2010-12-22 2011-08-10 华为技术有限公司 基于内容分发网络的路由实现方法及相关设备、***
CN102447712A (zh) * 2012-01-20 2012-05-09 华为技术有限公司 内容分发网络中节点互联的方法、***及节点
CN103036967A (zh) * 2012-12-10 2013-04-10 北京奇虎科技有限公司 一种下载管理设备、方法及数据下载***
US20140108672A1 (en) * 2011-12-02 2014-04-17 Huawei Technologies Co., Ltd. Content Delivery Network Routing Method, System and User Terminal
US20150215334A1 (en) * 2012-09-28 2015-07-30 Level 3 Communications, Llc Systems and methods for generating network threat intelligence
CN104980478A (zh) * 2014-05-28 2015-10-14 深圳市腾讯计算机***有限公司 内容分发网络中缓存共享方法、设备及***
US20160191651A1 (en) * 2014-12-29 2016-06-30 Akamai Technologies, Inc. Managing mobile device user subscription and service preferences to predictively pre-fetch content
CN106031130A (zh) * 2014-02-19 2016-10-12 第三雷沃通讯有限责任公司 具有边缘代理的内容传送网络架构
CN106790324A (zh) * 2015-11-20 2017-05-31 华为技术有限公司 内容分发方法、虚拟服务器管理方法、云平台和***
US20170153980A1 (en) * 2015-12-01 2017-06-01 Fastly, Inc. Anonymized network addressing in content delivery networks

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101640684A (zh) * 2009-08-21 2010-02-03 中国电信股份有限公司 内容分发方法、网络***、gslb设备和域名服务器
CN102148752A (zh) * 2010-12-22 2011-08-10 华为技术有限公司 基于内容分发网络的路由实现方法及相关设备、***
US20140108672A1 (en) * 2011-12-02 2014-04-17 Huawei Technologies Co., Ltd. Content Delivery Network Routing Method, System and User Terminal
CN102447712A (zh) * 2012-01-20 2012-05-09 华为技术有限公司 内容分发网络中节点互联的方法、***及节点
US20150215334A1 (en) * 2012-09-28 2015-07-30 Level 3 Communications, Llc Systems and methods for generating network threat intelligence
CN103036967A (zh) * 2012-12-10 2013-04-10 北京奇虎科技有限公司 一种下载管理设备、方法及数据下载***
CN106031130A (zh) * 2014-02-19 2016-10-12 第三雷沃通讯有限责任公司 具有边缘代理的内容传送网络架构
CN104980478A (zh) * 2014-05-28 2015-10-14 深圳市腾讯计算机***有限公司 内容分发网络中缓存共享方法、设备及***
US20160191651A1 (en) * 2014-12-29 2016-06-30 Akamai Technologies, Inc. Managing mobile device user subscription and service preferences to predictively pre-fetch content
CN106790324A (zh) * 2015-11-20 2017-05-31 华为技术有限公司 内容分发方法、虚拟服务器管理方法、云平台和***
US20170153980A1 (en) * 2015-12-01 2017-06-01 Fastly, Inc. Anonymized network addressing in content delivery networks

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
常可沛: "基于P2P和CDN技术的分层流媒体***及其关键问题研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
杨成,朱亚平等: "《网络电视技术》", 30 June 2017 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109067898A (zh) * 2018-08-24 2018-12-21 山东浪潮商用***有限公司 一种通过文件散列分布降低内容分发网络边缘节点回源率的方法
CN111565207A (zh) * 2019-02-13 2020-08-21 ***通信有限公司研究院 内容分发网络的控制方法、装置及计算机可读存储介质
CN114205260A (zh) * 2021-11-08 2022-03-18 南方电网深圳数字电网研究院有限公司 基于go语言的tcp连接探活方法及装置

Similar Documents

Publication Publication Date Title
CN108234639A (zh) 一种基于内容分发网络cdn的数据访问方法和装置
CN108696895A (zh) 资源获取方法、装置及***
CN106169978B (zh) Bmp报文的处理方法和装置
US9621512B2 (en) Dynamic network action based on DHCP notification
CN102404387B (zh) 一种用于与其他节点进行信息同步的方法、装置和设备
US9332075B2 (en) Distributed network firewall and flow-based forwarding system
EP3238096B1 (en) System and method for discovering a lan synchronization candidate for a synchronized content management system
CN108234207A (zh) 一种基于内容分发网络cdn的故障定位方法和装置
CN108173952A (zh) 一种内容分发网络cdn的数据访问方法和装置
US20180069787A1 (en) Exposing a subset of hosts on an overlay network to components external to the overlay network without exposing another subset of hosts on the overlay network
CN108234319A (zh) 一种数据的传输方法和装置
CN108200443A (zh) 一种直播流的分发方法和装置
CN108111623A (zh) 一种基于内容分发网络cdn的通信方法和装置
CN104380289B (zh) 服务感知分布式散列表路由
WO2016175768A1 (en) Map tables for hardware tables
CN109040243A (zh) 一种报文处理方法及装置
CN108173953A (zh) 一种基于内容分发网络cdn的文件分发方法和装置
CN108234632A (zh) 一种内容分发网络cdn的数据分发方法和装置
CN108345643A (zh) 一种数据处理方法及装置
CN108768878A (zh) 一种负载均衡***、方法、装置及负载均衡设备
CN111901240B (zh) 一种路由更新方法、网络加速***、服务器及交换机
CN108234638A (zh) 一种基于内容分发网络cdn的数据处理方法和装置
CN105100224A (zh) 数据传输方法及装置
JP5526015B2 (ja) ゲートウェイシステム、ゲートウェイ装置、負荷分散方法
CN109525678A (zh) 区块链网络***以及相应的节点设备发现方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180601