CN102281329B - 一种PaaS云平台的资源调度方法和*** - Google Patents

一种PaaS云平台的资源调度方法和*** Download PDF

Info

Publication number
CN102281329B
CN102281329B CN2011102196732A CN201110219673A CN102281329B CN 102281329 B CN102281329 B CN 102281329B CN 2011102196732 A CN2011102196732 A CN 2011102196732A CN 201110219673 A CN201110219673 A CN 201110219673A CN 102281329 B CN102281329 B CN 102281329B
Authority
CN
China
Prior art keywords
application
load
child node
node
child
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2011102196732A
Other languages
English (en)
Other versions
CN102281329A (zh
Inventor
徐鹏
刘长延
王玉龙
双锴
于晓燕
苏森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing University of Posts and Telecommunications
Original Assignee
Beijing University of Posts and Telecommunications
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing University of Posts and Telecommunications filed Critical Beijing University of Posts and Telecommunications
Priority to CN2011102196732A priority Critical patent/CN102281329B/zh
Publication of CN102281329A publication Critical patent/CN102281329A/zh
Application granted granted Critical
Publication of CN102281329B publication Critical patent/CN102281329B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Stored Programmes (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种平台即服务(PaaS)云平台的资源调度方法,PaaS云平台中管理节点检测各子节点的负载情况,对于负载超过阈值的子节点,将所述子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点;本发明同时还公开了一种PaaS云平台的资源调度***,通过本发明的方案,能够在资源调度时保证应用服务质量,减少应用副本迁移的信令开销,实现PaaS云平台的负载均衡。

Description

一种PaaS云平台的资源调度方法和***
技术领域
本发明涉及应用托管平台的资源调度算法,尤其涉及一种平台即服务(PaaS,Platform as a Service)云平台的资源调度方法和***。
背景技术
随着云计算技术的日益普及和云计算的大量工业化应用,云计算在实现服务的高可用性、处理能力的可扩展性等方面的优势越来越多的被业界认可。将云计算技术与业务开放平台相结合,不但可以为业务平台提供更为可用更具扩展弹性的基础平台,还可以将分布在各地各处的硬件资源组织起来,大大提高硬件资源的利用率,促进业务运营的增收节支。在云计算的三种应用形式中,PaaS形式是云计算技术与业务开放平台相结合的最佳形式。PaaS是指将一个完整的计算机平台,包括应用设计、应用开发、应用测试和应用托管,都作为一种服务提供给客户。目前,互联网上已存在大量的PaaS云平台实例,如GAE(Google App Engine)、SAE(Sina App Engine)等。
然而,基于云计算技术构建PaaS云平台也会引入一系列的不确定因素。例如,当新的应用需要部署到PaaS云平台中时需要选择适宜的服务节点处理相应应用的请求,然而在服务节点数量和应用数量都很大的时候,何种服务节点选择算法最为高效,资源利用率最高将是需要深入研究的内容。
现有的资源调度方法采用了一些降低应用服务质量的资源调度策略,并不完全适用于PaaS云平台,这种资源调度方法虽然保证了各个节点均处于负载最低的情况,采取了应用副本删除、应用副本迁移等方式,其中,应用副本删除会降低应用服务质量,应用副本迁移则增加了从已部署节点向目标节点转移应用副本的信令开销,并不适合对需要较高服务质量的应用调度。
发明内容
有鉴于此,本发明的主要目的在于提供一种PaaS云平台的资源调度方法和***,能够在资源调度时保证应用服务质量,减少应用副本迁移的信令开销。
为达到上述目的,本发明的技术方案是这样实现的:
本发明提供一种PaaS云平台的资源调度方法,该方法包括:
PaaS云平台中管理节点检测各子节点的负载情况,对于负载超过阈值的子节点,将所述子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点。
上述方案中,所述PaaS云平台中管理节点检测各节点的负载情况,为:PaaS云平台中管理节点通过各子节点发送的携带自身负载情况的心跳信息,获得全局负载信息,并用所述全局负载信息更新应用部署信息表,在应用部署信息表中按照各子节点的负载由重到轻进行排序。
上述方案中,所述负载超过阈值的子节点为:在应用部署信息表中负载超过阈值的子节点的集合;
所述各子节点的负载情况包括:各子节点的CPU、内存、带宽和存储资源的负载情况,以及各子节点中各应用的负载开销。
上述方案中,该方法进一步包括:所述管理节点根据应用类型和应用序号确定新上传的应用为第一次部署后,选择至少一个负载最轻且未部署所述应用的子节点部署所述应用。
上述方案中,该方法进一步包括:在需要删除应用时,所述管理节点根据所述应用的应用类型和应用序号,在已部署所述应用的子节点卸载所述应用。
上述方案中,该方法进一步包括:所述管理节点在检测不到子节点的负载情况、且获取不到所述子节点的信息时,确定所述子节点退出PaaS云平台,更新与所述子节点相关的应用部署信息。
本发明提供的一种PaaS云平台的资源调度***,该***包括:管理节点、多个子节点;其中,
所述管理节点检测各子节点的负载情况,将负载超过阈值的子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点。
上述方案中,所述管理节点,具体用于通过各子节点发送的携带自身负载情况的心跳信息,获得全局负载信息,并用所述全局负载信息更新应用部署信息表,在应用部署信息表中按照各子节点的负载由重到轻进行排序。
上述方案中,所述管理节点,进一步用于根据应用类型和应用序号确定新上传的应用为第一次部署后,选择至少一个负载最轻且未部署所述应用的子节点部署所述应用。
上述方案中,所述管理节点,进一步还用于在检测不到子节点的负载情况、且获取不到所述子节点的信息时,确定所述子节点退出PaaS云平台,更新与所述子节点相关的应用部署信息。
本发明提供了一种PaaS云平台的资源调度方法和***,PaaS云平台中管理节点检测各子节点的负载情况,对于负载超过阈值的子节点,将所述子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点;如此,能够在资源调度时保证应用服务质量,减少应用副本迁移的信令开销,实现PaaS云平台的负载均衡。
附图说明
图1为本发明实现一种PaaS云平台的资源调度方法的流程示意图;
图2为本发明PaaS云平台在资源调度过程中部署新上传应用的方法流程示意图;
图3为本发明PaaS云平台在资源调度过程中删除应用的方法流程示意图;
图4为本发明实现一种PaaS云平台的资源调度***的结构示意图。
具体实施方式
本发明的基本思想是:PaaS云平台中管理节点检测各子节点的负载情况,对于负载超过阈值的子节点,将所述子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点。
下面通过附图及具体实施例对本发明做进一步的详细说明。
本发明实现一种PaaS云平台的资源调度方法,如图1所示,该方法包括以下几个步骤:
步骤101:PaaS云平台中管理节点检测各子节点的负载情况;
具体的,各子节点统计自身的负载情况,向PaaS云平台中管理节点发送携带自身负载情况的心跳信息,PaaS云平台中管理节点通过各子节点发送的心跳信息,获得全局负载信息,并用所述全局负载信息更新应用部署信息表,在应用部署信息表中按照各子节点的负载由重到轻进行排序;所述应用部署信息表设置在数据库中,用于存储各子节点的负载情况;
所述各子节点的负载情况包括:各子节点的中央处理器(CPU,CentralProcessing Unit)、内存、带宽和存储资源的负载情况,以及各子节点中各应用的负载开销。
步骤102:对于负载超过阈值的子节点,将所述子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点;
本步骤中,所述负载超过阈值的子节点一般是:在应用部署信息表中负载超过阈值的子节点的集合;
所述阈值一般默认设置为该节点资源的70%;
所述将所述子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点,一般是:对所述子节点中负载开销最大的应用,选择负载最轻且未部署所述应用的子节点添加所述应用副本,更新应用部署信息表。进一步的,对所述负载开销最大的应用所在的子节点添加资源调度时戳,该资源调度时戳表示禁止该子节点的应用再次被调度的时间。
上述方法中,还可以包括:各子节点中的应用通过应用类型和应用序号进行唯一标示,所述管理节点根据应用类型和应用序号确定新上传的应用为第一次部署后,选择至少一个负载最轻且未部署所述应用的子节点部署所述应用。一般的,一个新应用在第一次部署时需要部署3个应用副本,即选择负载最轻且未部署所述应用的3个子节点部署所述应用副本,在部署完成后,更新路由表信息,在路由标中添加所述应用副本所在子节点的路由信息。这里,所述选择至少一个负载最轻且未部署所述应用的子节点部署所述应用,如图2所示,具体包括以下几个步骤:
步骤201:初始化已部署应用副本数为0;
步骤202:判断当前已部署应用副本数是否超过需要部署应用副本数,在不超过时,执行步骤203,在超过时,执行步骤204;
步骤203:遍历应用部署信息表,选择负载最轻且未部署所述应用的子节点部署所述应用,将已部署应用副本数加一,并更新应用部署信息表,执行步骤202;
步骤204:更新路由表信息,在路由标中添加所述应用副本所在子节点的路由信息。
上述方法中,进一步可以包括:各子节点中的应用通过应用类型和应用序号进行唯一标示,在需要删除应用时,所述管理节点根据所述应用的应用类型和应用序号,在已部署所述应用的子节点卸载所述应用。这里,所述在已部署所述应用的子节点卸载所述应用,如图3所示,具体包括以下几个步骤:
步骤301:初始化需要删除应用的已终止的应用副本数为0;
步骤302:判断已终止的应用副本数是否超过已部署的应用副本数,当不超过时,执行步骤303;当超过时,执行步骤306;
步骤303:根据需要删除应用的应用类型和应用序号,选择一个部署了该应用副本的节点,卸载该节点上所述应用副本;
步骤304:更新应用部署信息表中所述应用在该节点的负载开销,删除与该应用相对应的路由表信息;
步骤305:将已终止的应用副本数加一,执行步骤302;
步骤306:应用去部署完成。
上述方法中,进一步还可以包括:所述管理节点通过心跳机制检测不到某一个子节点的负载情况时,该管理节点发送节点信息请求给该子节点,主动获取该子节点的信息,当获取不到该子节点的信息时,确定该子节点退出PaaS云平台,更新与该子节点相关的应用部署信息,包括:更新应用部署信息表,删除该子节点的负载情况;更新路由表信息,删除该子节点的路由信息;等等。
为了实现上述方法,本发明还提供一种PaaS云平台的资源调度***,如图4所示,该***包括:管理节点、多个子节点;其中,
所述管理节点检测各子节点的负载情况,将负载超过阈值的子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点。
所述管理节点,具体用于通过各子节点发送的携带自身负载情况的心跳信息,获得全局负载信息,并用所述全局负载信息更新应用部署信息表,在应用部署信息表中按照各子节点的负载由重到轻进行排序。
所述管理节点,进一步用于根据应用类型和应用序号确定新上传的应用为第一次部署后,选择至少一个负载最轻且未部署所述应用的子节点部署所述应用。
在需要删除应用时,所述管理节点,还用于根据所述应用的应用类型和应用序号,在已部署所述应用的子节点卸载所述应用。
所述管理节点,进一步还用于在检测不到某一个子节点的负载情况、且获取不到所述子节点的信息时,确定所述子节点退出PaaS云平台,更新与所述子节点相关的应用部署信息。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。

Claims (8)

1.一种平台即服务(PaaS)云平台的资源调度方法,其特征在于,该方法包括:
PaaS云平台中管理节点通过各子节点发送的携带自身负载情况的心跳信息,获得全局负载信息,并用所述全局负载信息更新应用部署信息表,在应用部署信息表中按照各子节点的负载由重到轻进行排序,对于负载超过阈值的子节点,将所述子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点。
2.根据权利要求1所述的资源调度方法,其特征在于,所述负载超过阈值的子节点为:在应用部署信息表中负载超过阈值的子节点的集合;
所述各子节点的负载情况包括:各子节点的CPU、内存、带宽和存储资源的负载情况,以及各子节点中各应用的负载开销。
3.根据权利要求1所述的资源调度方法,其特征在于,该方法进一步包括:所述管理节点根据应用类型和应用序号确定新上传的应用为第一次部署后,选择至少一个负载最轻且未部署所述应用的子节点部署所述应用。
4.根据权利要求1所述的资源调度方法,其特征在于,该方法进一步包括:在需要删除应用时,所述管理节点根据所述应用的应用类型和应用序号,在已部署所述应用的子节点卸载所述应用。
5.根据权利要求1所述的资源调度方法,其特征在于,该方法进一步包括:所述管理节点在检测不到子节点的负载情况、且获取不到所述子节点的信息时,确定所述子节点退出PaaS云平台,更新与所述子节点相关的应用部署信息。
6.一种PaaS云平台的资源调度***,其特征在于,该***包括:管理节点、多个子节点;其中,
所述管理节点用于通过各子节点发送的携带自身负载情况的心跳信息,获得全局负载信息,并用所述全局负载信息更新应用部署信息表,在应用部署信息表中按照各子节点的负载由重到轻进行排序,将负载超过阈值的子节点中负载开销最大的应用,重新部署到负载最轻且未部署所述应用的子节点。
7.根据权利要求6所述的资源调度***,其特征在于,所述管理节点,进一步用于根据应用类型和应用序号确定新上传的应用为第一次部署后,选择至少一个负载最轻且未部署所述应用的子节点部署所述应用。
8.根据权利要求6所述的资源调度***,其特征在于,所述管理节点,进一步还用于在检测不到子节点的负载情况、且获取不到所述子节点的信息时,确定所述子节点退出PaaS云平台,更新与所述子节点相关的应用部署信息。
CN2011102196732A 2011-08-02 2011-08-02 一种PaaS云平台的资源调度方法和*** Expired - Fee Related CN102281329B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011102196732A CN102281329B (zh) 2011-08-02 2011-08-02 一种PaaS云平台的资源调度方法和***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011102196732A CN102281329B (zh) 2011-08-02 2011-08-02 一种PaaS云平台的资源调度方法和***

Publications (2)

Publication Number Publication Date
CN102281329A CN102281329A (zh) 2011-12-14
CN102281329B true CN102281329B (zh) 2013-11-20

Family

ID=45106498

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011102196732A Expired - Fee Related CN102281329B (zh) 2011-08-02 2011-08-02 一种PaaS云平台的资源调度方法和***

Country Status (1)

Country Link
CN (1) CN102281329B (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103530185B (zh) * 2012-07-02 2018-12-04 南京中兴新软件有限责任公司 资源优化方法及装置
CN102882973B (zh) * 2012-10-11 2015-05-20 北京邮电大学 基于p2p技术的分布式负载均衡***和方法
CN103023969A (zh) * 2012-11-15 2013-04-03 北京搜狐新媒体信息技术有限公司 一种云平台调度方法及***
CN102932210B (zh) * 2012-11-23 2015-06-24 北京搜狐新媒体信息技术有限公司 一种PaaS云平台的节点监控方法和***
CN103870904A (zh) * 2012-12-12 2014-06-18 ***通信集团公司 一种PaaS平台健康状态管理方法和装置
CN103916417B (zh) 2012-12-31 2017-09-05 华为技术有限公司 一种部署应用的方法和调度器
CN103443771B (zh) * 2013-01-16 2017-11-24 华为技术有限公司 一种数据中心间资源调度方法和设备
CN103973725B (zh) * 2013-01-28 2018-08-24 阿里巴巴集团控股有限公司 一种分布式协同方法和协同器
US9438670B2 (en) 2013-03-13 2016-09-06 International Business Machines Corporation Data replication for a virtual networking system
US9378068B2 (en) 2013-03-13 2016-06-28 International Business Machines Corporation Load balancing for a virtual networking system
CN103544254B (zh) * 2013-10-15 2017-10-10 华为技术有限公司 一种数据管理方法及装置
CN103746839B (zh) * 2013-12-27 2017-06-16 新浪网技术(中国)有限公司 PaaS***和PaaS应用池中的VM节点调度方法
CN103888516A (zh) * 2014-02-28 2014-06-25 江苏大学 一种具有QoS保证的云存储平台
CN103997526B (zh) * 2014-05-21 2018-05-22 中国科学院计算技术研究所 一种可扩展负载均衡***和方法
CN104967638B (zh) * 2014-07-28 2016-08-24 浙江大华技术股份有限公司 一种数据节点的分配方法及***
CN104333600A (zh) * 2014-11-13 2015-02-04 浪潮(北京)电子信息产业有限公司 一种基于云计算的资源管理方法及***
CN104468756B (zh) * 2014-11-27 2018-01-26 中国联合网络通信集团有限公司 PaaS平台中实现负载分配的方法和装置
CN104468759B (zh) * 2014-11-27 2018-06-01 中国联合网络通信集团有限公司 PaaS平台中实现应用迁移的方法和装置
CN105743936B (zh) * 2014-12-08 2018-10-19 华为技术有限公司 一种发送联动数据更新指令的方法及装置
CN105187482B (zh) * 2015-07-20 2018-09-28 深圳供电局有限公司 一种PaaS平台故障自愈实现的方法及消息服务器
CN105681463A (zh) * 2016-03-14 2016-06-15 浪潮软件股份有限公司 一种分布式服务框架以及分布式服务调用***
CN105872109B (zh) * 2016-06-17 2019-06-21 广东省广告集团股份有限公司 云平台负载运行方法
CN107547596B (zh) * 2016-06-27 2022-01-25 中兴通讯股份有限公司 一种基于Docker的云平台控制方法及装置
CN106385381B (zh) * 2016-08-23 2019-05-10 广东科学技术职业学院 一种匹配计算的资源调度分配方法及其***
CN107846715A (zh) * 2016-09-20 2018-03-27 深圳市盛路物联通讯技术有限公司 物联网基于传输速率的接入点切换方法及装置
CN106230986A (zh) * 2016-09-21 2016-12-14 南方电网科学研究院有限责任公司 一种基于电力PaaS云平台的资源适配调度***及方法
CN106970831B (zh) * 2017-05-15 2019-06-11 金航数码科技有限责任公司 一种面向云平台的虚拟机资源动态调度***及方法
CN108810125B (zh) * 2018-06-01 2021-04-23 云家园网络技术有限公司 物理节点的服务发现方法及***
CN110225129A (zh) * 2019-06-18 2019-09-10 余俊龙 基于区块链应用扩展控制方法及智能终端、私有云服务器
CN111400008B (zh) * 2020-03-13 2023-06-02 北京旷视科技有限公司 计算资源调度方法、装置及电子设备
CN111897654B (zh) * 2020-07-31 2023-08-15 腾讯科技(深圳)有限公司 将应用迁移到云平台的方法、装置、电子设备和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101697526A (zh) * 2009-10-10 2010-04-21 中国科学技术大学 分布式文件***中元数据管理的负载均衡方法及其***
CN102123179A (zh) * 2011-03-28 2011-07-13 中国人民解放军国防科学技术大学 应用于分布式应用***的负载均衡方法和***

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110078303A1 (en) * 2009-09-30 2011-03-31 Alcatel-Lucent Usa Inc. Dynamic load balancing and scaling of allocated cloud resources in an enterprise network
CN101753461B (zh) * 2010-01-14 2012-07-25 中国建设银行股份有限公司 实现负载均衡的方法、负载均衡服务器以及集群***

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101697526A (zh) * 2009-10-10 2010-04-21 中国科学技术大学 分布式文件***中元数据管理的负载均衡方法及其***
CN102123179A (zh) * 2011-03-28 2011-07-13 中国人民解放军国防科学技术大学 应用于分布式应用***的负载均衡方法和***

Also Published As

Publication number Publication date
CN102281329A (zh) 2011-12-14

Similar Documents

Publication Publication Date Title
CN102281329B (zh) 一种PaaS云平台的资源调度方法和***
US20210216355A1 (en) Minimizing impact of migrating virtual services
CN110413389B (zh) 一种资源不均衡Spark环境下的任务调度优化方法
US10474504B2 (en) Distributed node intra-group task scheduling method and system
CN106302632B (zh) 一种基础镜像的下载方法以及管理节点
US20170228312A1 (en) Continuous deployment pipeline tests
US20200225984A1 (en) Computing node job assignment for distribution of scheduling operations
CN113051075B (zh) 一种Kubernetes智能化扩缩容的方法及装置
CN104199739B (zh) 一种基于负载均衡的推测式Hadoop调度方法
CN107273200B (zh) 一种针对异构存储的任务调度方法
CN114756347B (zh) 基于集群的服务器资源调度方法、装置、云平台及介质
CN103595805A (zh) 一种基于分布式集群的数据放置方法
CN109189552B (zh) 虚拟网络功能扩容与缩容方法及***
CN114153580A (zh) 一种跨多集群的工作调度方法及装置
CN113835865A (zh) 一种任务部署方法和装置、电子设备和存储介质
CN106775975B (zh) 进程调度方法及装置
CN108388471B (zh) 一种基于双门限约束虚机迁移的管理方法
CN112231053B (zh) 一种负载均衡服务分配方法及装置
CN115665157B (zh) 一种基于应用资源类型的均衡调度方法和***
CN108259583B (zh) 一种数据动态迁移方法及装置
CN108874798B (zh) 一种大数据排序方法和***
CN113986458A (zh) 容器集合调度方法、装置、设备及存储介质
US20180121348A1 (en) Automatic Garbage Collection for Distributed Storage
CN112559115A (zh) 一种容器镜像的删除方法、装置及设备
CN104699540B (zh) 一种存储资源均衡方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20131120

Termination date: 20170802

CF01 Termination of patent right due to non-payment of annual fee