CN106657421A - 一种文件预取方法和*** - Google Patents

一种文件预取方法和*** Download PDF

Info

Publication number
CN106657421A
CN106657421A CN201710152174.3A CN201710152174A CN106657421A CN 106657421 A CN106657421 A CN 106657421A CN 201710152174 A CN201710152174 A CN 201710152174A CN 106657421 A CN106657421 A CN 106657421A
Authority
CN
China
Prior art keywords
file
seed
server
fringe node
decision
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710152174.3A
Other languages
English (en)
Inventor
沈景华
陈进贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wangsu Science and Technology Co Ltd
Original Assignee
Wangsu Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wangsu Science and Technology Co Ltd filed Critical Wangsu Science and Technology Co Ltd
Priority to CN201710152174.3A priority Critical patent/CN106657421A/zh
Publication of CN106657421A publication Critical patent/CN106657421A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H04L67/5681—Pre-fetching or pre-delivering data based on network characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种文件预取方法和***，所述方法包括以下步骤：分析多个边缘节点各自的当前状态信息；根据当前状态信息决策并选出一个或者多个边缘节点作为种子服务器；种子服务器负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。本发明利用边缘节点充当种子服务器，从种子服务器而非源站去取文件，能极大减小源站压力，进而提高预取文件速度。

Description

一种文件预取方法和***
技术领域
本发明涉及网络文件下载技术领域，特别涉及一种文件预取方法和***。
背景技术
在互联网高速发展的今天，面对用户下载需求的剧增，传统的内容分发网络(Content Delivery Network，CDN)文件预取方式已逐渐无法满足客户需求。
在传统CDN文件预取***中，文件预取方式采用的是：中心管理服务器直接往二级缓存节点或者边缘节点发送文件预取请求，由二级缓存节点或者边缘节点直接到源站下载需要预取的文件。
但是，这种传统的文件预取方式如今面临以下几个问题：
(1)大量边缘节点或者二级缓存节点同时向源站预取文件时，会导致源站带宽徒增，进而造成源站的***瘫痪；
(2)由于源站压力过大，又导致其他正常CDN资源文件的回源，进而影响CDN的服务效率；
(3)对于大文件，如操作***、大型游戏等，预取过程耗时较长。
发明内容
为了解决现有技术的问题，本发明实施例提供了一种文件预取方法和***。所述技术方案如下：
一方面，一种文件预取方法，其中，所述文件预取方法包括以下步骤：
分析多个边缘节点各自的当前状态信息；
根据所述当前状态信息决策并选出一个或者多个边缘节点作为种子服务器；
所述种子服务器负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。
进一步的，所述文件预取方法还包括以下步骤：
通知各个需要预取的文件的边缘节点到之前所选定的所述种子服务器下载所述种子文件；。
各个需要预取的文件的边缘节点通过P2P方式从之前所选定的种子服务器下载所述种子文件。
进一步的，所述文件预取方法还包括以下步骤：
实时分析每一个边缘节点的当前状态信息，根据实时的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
进一步的，所述文件预取方法还包括以下步骤：
从所述种子服务器获取所述种子文件，并下发所述种子文件和各个边缘节点之间的互联关系到各个需要预取的文件的边缘节点。
进一步的，所述文件预取方法还包括以下步骤：
实时分析每一个边缘节点的当前状态信息，根据实时的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
另一方面，一种文件预取***，其中，所述文件预取***包括决策组件、调度服务器以及多个边缘节点，其中，
所述决策组件，用于分析所述多个边缘节点各自的当前状态信息，并将分析结果实时上报至所述调度服务器；
所述调度服务器，用于根据实时上报的所述分析结果决策并选出一个或者多个边缘节点作为种子服务器；
所述种子服务器，用于负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。
进一步的，所述文件预取***还包括追踪服务器，其中，所述调度服务器，还用于通过所述追踪服务器通知各个需要预取的文件的边缘节点到之前所选定的所述种子服务器下载所述种子文件，各个需要预取的文件的边缘节点通过P2P方式从之前所选定的种子服务器下载所述种子文件。
进一步的，所述决策组件还用于实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至所述调度服务器；
所述调度服务器，还用于根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至所述追踪服务器；
所述追踪服务器，还用于通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
进一步的，所述调度服务器，还用于从所述种子服务器获取所述种子文件，并将所述种子文件和各个边缘节点之间的互联关系下发到所述追踪服务器中；
所述追踪服务器，还用于在接收到所述调度服务器下发的内容后，将所述种子文件下发到各个需要预取的文件的边缘节点。
进一步的，所述决策组件还用于实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至所述调度服务器；
所述调度服务器，还用于根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至所述追踪服务器；
所述追踪服务器，还用于通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
本发明实施例提供的技术方案带来的有益效果是：利用边缘节点充当种子服务器，通过种子服务器去源站下载预取的文件，其它边缘节点再从种子服务器而非源站去取文件，能极大减小源站压力，进而提高预取文件速度，同时也减少了对其它正常CDN资源文件的回源的影响；本发明实施例还将选定的边缘节点充当种子服务器，利用种子服务器生成种子文件，而不是利用源站生成种子文件，进而提高源站文件数据的安全性。另外，本发明实施例实时分析各边缘节点的当前状态信息，实时调整并动态更新边缘节点为可用的下载节点，保证下载速度最大化，资源消耗最小化。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一实施方式中文件预取方法流程图；
图2为本发明一实施方式中文件预取***的网络布局图；
图3为本发明另一实施方式中文件预取方法流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
实施例一
以下将对本发明所提供的实施一中的一种文件预取方法进行详细说明。
请参阅图1，为本发明一实施方式中文件预取方法流程图。
在本实施方式中，该文件预取方法应用于文件预取***，主要解决大文件的快速预取问题，进而减少源站及内容分发网络(Content Delivery Network，CDN)二级缓存节点的压力。较佳的，所述文件预取***是基于点到点(Peer To Peer，P2P)的内容智能预取***，涉及大规模集群机器P2P下载智能调度、大文件的快速下载。所述文件预取***包括决策组件、调度服务器、追踪(Tracker)服务器以及多个边缘节点(Peer)，如图2所示。
请参阅与2，所示为本发明一实施方式中文件预取***的网络布局图。
如图2所示，所述文件预取***包括决策组件、调度服务器、追踪(Tracker)服务器以及多个边缘节点(Peer)，其中，Tracker服务器的数量可以包括一个或者多个，决策组件、调度服务器、一个或者多个Tracker服务器组成了一个中心调度***，该中心调度***和外部支撑平台通信连接并从该外部支撑平台收集各个Peer的当前流量信息、负载信息、机器存活等相关的运行状态信息，以及还收集点对点之间的网络质量信息并进行实时计算，该中心调度***根据实时计算结果来决策每个Peer所能连接的最佳Tracker服务器，通过Tracker将决策结果通知到每个对应的Peer，每一个Tracker服务器可以连接一个Peer或者多个Peer，每一个Peer都引入P2P下载技术，既可以作为客户端，又可以作为服务端。源站是提供源文件的站点，现有技术中大量的Peer同时向源站预取文件时，会导致源站带宽徒增，严重的将造成源站的***瘫痪。
请继续参阅图1，在步骤S11中，分析多个边缘节点各自的当前状态信息。
在本实施方式中，利用决策组件分析多个边缘节点各自的当前状态信息，状态信息包括实时流量信息、负载状态信息等等，决策组件通常为一台服务器，例如决策服务器，决策组件是与外部支撑平台通信连接，该外部支撑平台包括日志***、流量***以及监控***，其中每一个***通常为一***立的服务器，例如流量***为一台流量服务器负责收集各个Peer的当前流量信息，监控***为一台监控服务器负责监控各个Peer的当前负载状态信息，该外部支撑平台收集各个Peer的当前流量信息、负载信息、机器存活等相关的运行状态信息，以及还收集点对点之间的网络质量信息，然后将这些运行状态信息和点对点之间的网络质量信息一起发送给决策组件进行分析，并进行实时计算，以获取哪个或者那些Peer适合充当种子服务器的分析结果。
在步骤S12中，根据所述当前状态信息决策并选出一个或者多个边缘节点作为种子服务器。
在本实施方式中，决策组件将分析结果实时上报至调度服务器，由调度服务器决策并选出一个或者多个边缘节点作为种子服务器，决策组件通过收集各种信息分析得到哪个或者那些Peer适合充当种子服务器，并将这一分析结果上报至调度服务器，由调度服务器决策并选出一个或者多个Peer作为种子服务器，通常有些适合充当种子服务器的Peer最后并一定就作为种子服务器，还需要考虑当前的网络状况等因素。
在步骤S13中，种子服务器负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。
在本实施方式中，调度服务器将决策结果通过追踪服务器发送到选定的种子服务器，然后，种子服务器负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。
在本实施方式中，P2P文件交换技术则是采用比特流(Bit Torrent，BT)，BT的特点是用户下载的同时，也在为其它用户提供上传，所以不会像文件传输协议(File TransferProtocol，FTP)服务器那样随着用户数的增加而导致下载速度降低，恰恰相反，对于BT下载而言，下载的人越多速度越快。
在本实施方式中，Tracker服务器是BT下载中必须的角色，使用BT服务不需要指定服务器，虽然在BT服务里面仍然有服务器的概念，但使用BT服务的人并不需要关心服务器在哪里。BT服务器称为Tracker，BT中的Tracker主要是指运行于服务器上的一个程序，这个程序能够追踪到底有多少人同时在下载同一个文件。客户端连上Tracker服务器，就会获得一个下载人员的名单，根据这个名单BT会自动连上其它机器进行下载。
在本实施方式中，Tracker服务器负责执行调度服务器的任务，调度服务器将决策结果通过Tracker服务器发送到选定的种子服务器，通知所选定的Peer是作为种子服务器的。
在本实施方式中，所选定的Peer在接收到作为种子服务器的决策结果后，就从源站下载需要预取的文件，并在下载完成之后制作成种子文件。
在本实施方式中，CDN服务提供商一般是无法直接控制源站文件数据的，即使CDN服务提供商能直接控制源站文件数据，则在源站生成种子文件或者让源站加入P2P网络，可能会对源站的文件数据的安全性造成影响，也有可能存在大量的Peer直接从源站取文件，这样一来势必给源站造成巨大压力，导致源站带宽徒增，严重的将造成源站的***瘫痪。但是本发明是将选定的Peer充当种子服务器，利用种子服务器生成种子文件，而不是利用源站生成种子文件，因为如果利用源站生成种子文件，则会影响源站文件数据的安全性。
在一实施例中，本发明实施例提供的文件预取方法还可以包括步骤S14～S16：其中，在步骤S14中，通知各个需要预取的文件的边缘节点到之前所选定的种子服务器下载种子文件。
在本实施方式中，调度服务器通过追踪服务器通知各个需要预取的文件的边缘节点到之前所选定的种子服务器下载种子文件，在选定的Peer充当种子服务器并完成种子文件的制作后，调度服务器通过Tracker服务器通知各个需要预取的文件的Peer到之前所选定的种子服务器下载种子文件，而不需要到源站下载种子文件，进而最大限度的减小了源站压力。
在步骤S15中，各个需要预取的文件的边缘节点通过P2P方式从之前所选定的种子服务器下载种子文件的同时，实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报。
在本实施方式中，各个需要预取的文件的边缘节点通过P2P方式从之前所选定的种子服务器下载种子文件的同时，决策组件实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至调度服务器。
在步骤S16中，根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
在本实施方式中，由调度服务器根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至追踪服务器，由追踪服务器通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
在本实施方式中，之前所选定的种子服务器并非固定且一成不变，本发明根据实际网络情况动态选择各种Peer充当种子服务器，并将更新后的种子服务器这一决策结果推送至Tracker服务器，通过Tracker服务器通知各个需要预取的文件的Peer到更新后的种子服务器下载种子文件，这样一来，通过动态选择种子服务器来提高预取文件的速度。
实施例二
以下将对本发明所提供的实施二中的另一种文件预取方法进行详细说明。
请参阅图3，为本发明另一实施方式中文件预取方法流程图。
在本实施方式中，步骤S21-S23分别与实施例一中步骤S11-S13相同，在此不做重复叙述。
在步骤S24中，从种子服务器获取种子文件，并下发种子文件和各个边缘节点之间的互联关系。
在本实施方式中，调度服务器从种子服务器获取种子文件，并将种子文件和各个边缘节点之间的互联关系下发到追踪服务器中，各个Peer之间的互联关系构成一个P2P网络，调度服务器将获取到的种子文件和各个边缘节点之间的互联关系下发到Tracker服务器中。
在步骤S25中，在接收到下发的内容后，将种子文件下发到各个需要预取的文件的边缘节点。
在本实施方式中，追踪服务器在接收到调度服务器下发的内容后，将种子文件下发到各个需要预取的文件的边缘节点，Tracker服务器负责执行调度服务器的任务，将下发的种子文件进一步下发到各个需要预取的文件的Peer，这样一来，各个需要预取的文件的Peer不需要从源站获取文件，而是从调度服务器获取文件种子文件，再根据种子文件进行文件的预取，同样的减少了源站的压力。
在步骤S26中，实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报。
在本实施方式中，各个需要预取的文件的边缘节点(主要是指没有种子文件的边缘节点)通过P2P方式从有种子文件的边缘节点开始下载种子文件的同时，决策组件实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至调度服务器。
在步骤S27中，根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
在本实施方式中，由调度服务器根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至追踪服务器，由追踪服务器通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
本发明提供的两种文件预取方法，利用边缘节点充当种子服务器，通过种子服务器去源站下载预取的文件，其它边缘节点再从种子服务器而非源站去取文件，能极大减小源站压力，进而提高预取文件速度，同时也减少了对其它正常CDN资源文件的回源的影响；同时还将选定的边缘节点充当种子服务器，利用种子服务器生成种子文件，而不是利用源站生成种子文件，进而提高源站文件数据的安全性。另外，通过实时分析各边缘节点的当前状态信息，实时调整并动态更新边缘节点为可用的下载节点，保证下载速度最大化，资源消耗最小化。
实施例三
以下将对本发明所提供的一种文件预取***进行详细说明。
请参阅图2，所示为本发明一实施方式中文件预取***的网络布局图。
在本实施方式中，所述文件预取***包括决策组件、调度服务器、追踪(即Tracker)服务器以及多个边缘节点(即Peer)，其中，Tracker服务器的数量可以包括一个或者多个，决策组件、调度服务器、一个或者多个Tracker服务器组成了一个中心调度***，该中心调度***和外部支撑平台通信连接并从该外部支撑平台收集各个Peer的当前流量信息、负载信息、机器存活等相关的运行状态信息，以及还收集点对点之间的网络质量信息并进行实时计算，该中心调度***根据实时计算结果来决策每个Peer所能连接的最佳Tracker服务器，通过Tracker将决策结果通知到每个对应的Peer，每一个Tracker服务器可以连接一个Peer或者多个Peer，每一个Peer都引入P2P下载技术，既可以作为客户端，又可以作为服务端。源站是提供源文件的站点，现有技术中大量的Peer同时向源站预取文件时，会导致源站带宽徒增，严重的将造成源站的***瘫痪。
决策组件，用于分析所述多个边缘节点各自的当前状态信息，并将分析结果实时上报至所述调度服务器。
在本实施方式中，状态信息包括实时流量信息、负载状态信息等等，决策组件通常为一台服务器，例如决策服务器，决策组件是与外部支撑平台通信连接，该外部支撑平台包括日志***、流量***以及监控***，其中每一个***通常为一***立的服务器，例如流量***为一台流量服务器负责收集各个Peer的当前流量信息，监控***为一台监控服务器负责监控各个Peer的当前负载状态信息，该外部支撑平台收集各个Peer的当前流量信息、负载信息、机器存活等相关的运行状态信息，以及还收集点对点之间的网络质量信息，然后将这些运行状态信息和点对点之间的网络质量信息一起发送给决策组件进行分析，并进行实时计算，以获取哪个或者那些Peer适合充当种子服务器的分析结果。
调度服务器，用于根据实时上报的所述分析结果决策并选出一个或者多个边缘节点作为种子服务器。
在本实施方式中，决策组件通过收集各种信息分析得到哪个或者那些Peer适合充当种子服务器，并将这一分析结果上报至调度服务器，由调度服务器决策并选出一个或者多个Peer作为种子服务器，通常有些适合充当种子服务器的Peer最后并一定就作为种子服务器，还需要考虑当前的网络状况等因素。
在本实施方式中，Tracker服务器是BT下载中必须的角色，使用BT服务不需要指定服务器，虽然在BT服务里面仍然有服务器的概念，但使用BT服务的人并不需要关心服务器在哪里。BT服务器称为Tracker，BT中的Tracker主要是指运行于服务器上的一个程序，这个程序能够追踪到底有多少人同时在下载同一个文件。客户端连上Tracker服务器，就会获得一个下载人员的名单，根据这个名单BT会自动连上其它机器进行下载。
在本实施方式中，Tracker服务器负责执行调度服务器的任务，调度服务器将决策结果通过Tracker服务器发送到选定的种子服务器，通知所选定的Peer是作为种子服务器的。
种子服务器，用于负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。
在本实施方式中，CDN服务提供商一般是无法直接控制源站文件数据的，即使CDN服务提供商能直接控制源站文件数据，则在源站生成种子文件或者让源站加入P2P网络，可能会对源站的文件数据的安全性造成影响，也有可能存在大量的Peer直接从源站取文件，这样一来势必给源站造成巨大压力，导致源站带宽徒增，严重的将造成源站的***瘫痪。但是本发明是将选定的Peer充当种子服务器，利用种子服务器生成种子文件，而不是利用源站生成种子文件，因为如果利用源站生成种子文件，则会影响源站文件数据的安全性。
另外，调度服务器，还用于通过追踪服务器通知各个需要预取的文件的边缘节点到之前所选定的种子服务器下载种子文件。在各个需要预取的文件的边缘节点通过P2P方式从之前所选定的种子服务器下载所述种子文件的同时，所述决策组件还用于实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至所述调度服务器，其中，
所述调度服务器，还用于根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至所述追踪服务器；
所述追踪服务器，还用于通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
或者，调度服务器，还用于从种子服务器获取种子文件，并将种子文件和各个边缘节点之间的互联关系下发到追踪服务器中，其中，所述追踪服务器，还用于在接收到所述调度服务器下发的内容后将所述种子文件下发到各个需要预取的文件的边缘节点，各个需要预取的文件的边缘节点(主要是指没有种子文件的边缘节点)通过P2P方式从有种子文件的边缘节点开始下载种子文件的同时，决策组件还用于实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至调度服务器，其中，
所述调度服务器，还用于根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至所述追踪服务器；
所述追踪服务器，还用于通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
本发明提供的一种文件预取***，利用边缘节点充当种子服务器，通过种子服务器去源站下载预取的文件，其它边缘节点再从种子服务器而非源站去取文件，能极大减小源站压力，进而提高预取文件速度，同时也减少了对其它正常CDN资源文件的回源的影响；本发明实施例还将选定的边缘节点充当种子服务器，利用种子服务器生成种子文件，而不是利用源站生成种子文件，进而提高源站文件数据的安全性。另外，本发明实施例实时分析各边缘节点的当前状态信息，实时调整并动态更新边缘节点为可用的下载节点，保证下载速度最大化，资源消耗最小化。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种文件预取方法，其特征在于，包括以下步骤：
分析多个边缘节点各自的当前状态信息；
根据所述当前状态信息决策并选出一个或者多个边缘节点作为种子服务器；
所述种子服务器负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。
2.如权利要求1所述的文件预取方法，其特征在于，所述文件预取方法还包括以下步骤：
通知各个需要预取的文件的边缘节点到之前所选定的所述种子服务器下载所述种子文件；
各个需要预取的文件的边缘节点通过P2P方式从之前所选定的种子服务器下载所述种子文件。
3.如权利要求2所述的文件预取方法，其特征在于，所述文件预取方法还包括以下步骤：
实时分析每一个边缘节点的当前状态信息，根据实时的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
4.如权利要求1所述的文件预取方法，其特征在于，所述文件预取方法还包括以下步骤：
从所述种子服务器获取所述种子文件，并下发所述种子文件和各个边缘节点之间的互联关系到各个需要预取的文件的边缘节点。
5.如权利要求4所述的文件预取方法，其特征在于，所述文件预取方法还包括以下步骤：
实时分析每一个边缘节点的当前状态信息，根据实时的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
6.一种文件预取***，其特征在于，所述文件预取***包括决策组件、调度服务器以及多个边缘节点，其中，
所述决策组件，用于分析所述多个边缘节点各自的当前状态信息，并将分析结果实时上报至所述调度服务器；
所述调度服务器，用于根据实时上报的所述分析结果决策并选出一个或者多个边缘节点作为种子服务器；
所述种子服务器，用于负责从源站下载需要预取的文件，并在下载完成之后制作成种子文件供需要预取的文件的边缘节点下载。
7.如权利要求6所述的文件预取***，其特征在于，所述文件预取***还包括追踪服务器，其中，所述调度服务器，还用于通过所述追踪服务器通知各个需要预取的文件的边缘节点到之前所选定的所述种子服务器下载所述种子文件，各个需要预取的文件的边缘节点通过P2P方式从之前所选定的种子服务器下载所述种子文件。
8.如权利要求7所述的文件预取***，其特征在于，
所述决策组件还用于实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至所述调度服务器，
所述调度服务器，还用于根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至所述追踪服务器；
所述追踪服务器，还用于通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
9.如权利要求7所述的文件预取***，其特征在于，
所述调度服务器，还用于从所述种子服务器获取所述种子文件，并将所述种子文件和各个边缘节点之间的互联关系下发到所述追踪服务器中；
所述追踪服务器，还用于在接收到所述调度服务器下发的内容后，将所述种子文件下发到各个需要预取的文件的边缘节点。
10.如权利要求9所述的文件预取***，其特征在于，
所述决策组件还用于实时分析每一个边缘节点的当前状态信息，并将分析结果实时上报至所述调度服务器；
所述调度服务器，还用于根据实时上报的分析结果决策并选定在当前状态下能作为种子服务器的边缘节点，并将决策结果推送至所述追踪服务器；
所述追踪服务器，还用于通知各个需要预取的文件的边缘节点实时更新可用的下载节点。
CN201710152174.3A 2017-03-15 2017-03-15 一种文件预取方法和*** Pending CN106657421A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710152174.3A CN106657421A (zh) 2017-03-15 2017-03-15 一种文件预取方法和***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710152174.3A CN106657421A (zh) 2017-03-15 2017-03-15 一种文件预取方法和***

Publications (1)

Publication Number Publication Date
CN106657421A true CN106657421A (zh) 2017-05-10

Family

ID=58848289

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710152174.3A Pending CN106657421A (zh) 2017-03-15 2017-03-15 一种文件预取方法和***

Country Status (1)

Country Link
CN (1) CN106657421A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107277125A (zh) * 2017-06-13 2017-10-20 网宿科技股份有限公司 文件预取指令推送方法、装置及文件预取***
CN109040308A (zh) * 2018-09-12 2018-12-18 杭州趣链科技有限公司 一种基于ipfs的文件分发***及文件分发方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101087403A (zh) * 2007-05-31 2007-12-12 吴彬 基于p2p技术上的分布式流媒体点播***及其点播流媒体节目的实现方法
CN101159580A (zh) * 2007-11-29 2008-04-09 中国电信股份有限公司 内容分发网络中内容p2p化方法及***
CN103634692A (zh) * 2013-12-06 2014-03-12 南京理工大学连云港研究院 基于cdn和p2p的混合流媒体视频点播***
CN104935640A (zh) * 2015-05-07 2015-09-23 上海逸云信息科技发展有限公司 一种p2p加速的内容分发网络***及方法
CN105577646A (zh) * 2015-12-11 2016-05-11 合一网络技术(北京)有限公司 用户侧带宽聚合的方法、设备和内容分发***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101087403A (zh) * 2007-05-31 2007-12-12 吴彬 基于p2p技术上的分布式流媒体点播***及其点播流媒体节目的实现方法
CN101159580A (zh) * 2007-11-29 2008-04-09 中国电信股份有限公司 内容分发网络中内容p2p化方法及***
CN103634692A (zh) * 2013-12-06 2014-03-12 南京理工大学连云港研究院 基于cdn和p2p的混合流媒体视频点播***
CN104935640A (zh) * 2015-05-07 2015-09-23 上海逸云信息科技发展有限公司 一种p2p加速的内容分发网络***及方法
CN105577646A (zh) * 2015-12-11 2016-05-11 合一网络技术(北京)有限公司 用户侧带宽聚合的方法、设备和内容分发***

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
赵松涛: "《网络应用基础》", 31 July 2006 *
邓家先: "《信息论与编码》", 1 February 2016 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107277125A (zh) * 2017-06-13 2017-10-20 网宿科技股份有限公司 文件预取指令推送方法、装置及文件预取***
CN109040308A (zh) * 2018-09-12 2018-12-18 杭州趣链科技有限公司 一种基于ipfs的文件分发***及文件分发方法

Similar Documents

Publication Publication Date Title
CN107465708B (zh) 一种cdn带宽调度***及方法
CN109308221B (zh) 一种基于WebSocket长连接的Nginx动态负载均衡方法
CN105072172B (zh) 一种基于内容分发网络的热点统计及推送方法及***
Zhang et al. Intelligent workload factoring for a hybrid cloud computing model
CN103369601B (zh) 为手机客户端提供大并发处理及流量控制的方法
EP3296870A1 (en) Cdn-based content management system
CN101883103B (zh) 云数据中心内Web服务器群架构的客户端侧扩展的方法和***
Doyle et al. The trickle-down effect: Web caching and server request distribution
CN103108008B (zh) 一种下载文件的方法及文件下载***
CN105516360A (zh) 一种计算机的负载均衡方法及装置
KR20070089155A (ko) 웹 페이지를 제공하기 위한 시스템 및 방법
US8005926B2 (en) Tiered web site with web-tier admission control based on utilization data generated on application tier
CN106101264B (zh) 内容分发网络日志推送方法、装置和***
CN102055771B (zh) 面向云服务的多并发业务流控制装置及控制方法
CN108600300A (zh) 日志数据处理方法及装置
CN105897845A (zh) Cdn服务节点的调度方法及服务器
CN110087250A (zh) 一种基于多目标联合优化模型的网络切片编排方案及其方法
CN106254561A (zh) 一种网络资源文件的实时离线下载方法及***
CN106790381A (zh) 基于加权最小连接的动态反馈负载均衡方法
CN105872856A (zh) 一种流媒体文件分发方法及***
CN104202386B (zh) 一种高并发量分布式文件***及其二次负载均衡方法
CN106657421A (zh) 一种文件预取方法和***
CN103248636B (zh) 离线下载的***及方法
CN103416027B (zh) 缓存优化的方法、缓存器和缓存优化的***
CN106686112A (zh) 云文件传输***及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170510

RJ01 Rejection of invention patent application after publication