CN101600174A - 一种文件处理过程中流量控制方法及设备 - Google Patents

一种文件处理过程中流量控制方法及设备 Download PDF

Info

Publication number
CN101600174A
CN101600174A CNA200910150760XA CN200910150760A CN101600174A CN 101600174 A CN101600174 A CN 101600174A CN A200910150760X A CNA200910150760X A CN A200910150760XA CN 200910150760 A CN200910150760 A CN 200910150760A CN 101600174 A CN101600174 A CN 101600174A
Authority
CN
China
Prior art keywords
file
instruction
flow control
flow threshold
flow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA200910150760XA
Other languages
English (en)
Inventor
周国胜
谢钢锋
马忠平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CNA200910150760XA priority Critical patent/CN101600174A/zh
Publication of CN101600174A publication Critical patent/CN101600174A/zh
Priority to PCT/CN2010/072047 priority patent/WO2010145314A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种文件处理过程中流量控制方法及设备，涉及计算机***。本发明公开的方法包括：文件处理过程中，文件处理程序实时判断是否接收到流量控制指令，当所述文件处理程序接收到所述流量控制指令时，根据所接收的流量控制指令控制文件处理速度。本发明技术方案通过对上游的文件处理的流量控制，降低了CPU资源的占用，提高了***整体处理的稳定性。

Description

一种文件处理过程中流量控制方法及设备
技术领域
本发明涉及计算机***，特别涉及一种文件处理过程中流量控制方法及设备。
背景技术
随着短信业务的发展成熟，运营商一方面要求短信中心运行稳定，另一方面希望能提供基于短信的各种运营分析数据。在此指导思想下，短信中心的功能趋于简单的业务处理，而短信数据的入库和统计分析工作则由另外的模块来完成。
目前，考虑成本等多种因素，均采取多个短信中心话单集中处理的办法来实现数据入库。但海量的数据以及数据库自身存在的性能瓶颈使其无法快速完成预处理文件产生的数据的入库操作，相反文件处理占用了大量的CPU资源，又直接降低了数据库的入库性能，使得***的稳定性和数据正确性大打折扣。
发明内容
本发明所要解决的技术问题是，提供一种文件处理过程中流量控制方法及设备，从而提高***整体处理文件的稳定性。
为了解决上述问题，本发明公开了一种文件处理过程中流量控制方法，包括：
文件处理过程中，文件处理程序实时判断是否接收到流量控制指令，当所述文件处理程序接收到所述流量控制指令时，根据所接收的流量控制指令控制文件处理速度。
进一步地，上述方法中，所述文件处理程序实时判断是否接收到所述流量控制指令的同时，还判断当前处理速度是否超过设定的流量阈值，若当前处理速度超过所述流量阈值时，则所述文件处理程序在单位时间内限制文件处理速度。
其中，所述文件处理程序判断当前处理速度是否超过所述流量阈值的过程是：通过读取配置文件中设定的流量阈值，以判断当前处理速度是否超过设定的流量阈值。
所述流量控制指令为无限制指令、一般限制指令或者阻塞指令。
所述文件处理程序接收到所述无限制指令时，则无条件的处理扫描到的文件；
所述文件处理程序接收到所述一般限制指令时，则进一步判断当前处理速度是否超过流量阈值，如果超过流量阈值，则停止文件的处理；如果未达到流量阈值，则继续文件的处理；
所述文件处理程序接收到所述阻塞指令时，则直接返回，对文件不做任何处理，结束操作。
本发明还公开了一种文件处理过程中流量控制设备，至少包括指令接收模块以及处理模块，其中：
所述指令接收模块，用于接收外部的流量控制指令，并将所述接收的流量控制指令发送到所述处理模块；
所述处理模块，用于接收所述判断模块发送的判断结果，当所接收的判断结果是当前处理速度超过所述流量阈值时，则在单位时间内限制文件处理速度，以及用于接收所述指令接收模块发送的流量控制指令，并根据所接收的流量控制指令进行相应的处理。
进一步地，上述设备还包括判断模块，所述判断模块，用于在文件处理过程中实时判断当前处理速度是否超过设定的流量阈值，并将判断结果发送到所述处理模块。
其中，所述判断模块，读取配置文件中设定的流量阈值，并实时判断当前处理速度是否超过所述流量阈值。
所述流量控制指令为无限制指令、一般限制指令或者阻塞指令。
所述处理模块，接收到所述无限制指令时，则无条件的处理扫描到的文件；
接收到所述一般限制指令时，则进一步判断当前处理速度是否超过流量阈值，如果超过流量阈值，则停止文件的处理；如果未达到流量阈值，则继续文件的处理；
接收到所述阻塞指令时，则直接返回，对文件不做任何处理，结束操作。
本发明技术方案通过对上游的文件处理的流量控制，降低了CPU资源的占用，提高了***整体处理的稳定性。
附图说明
图1为本实施例中文件处理过程中流量控制设备的结构示意图；
图2为本实施例中文件处理过程中流量控制的流程图。
具体实施方式
本发明的主要构思是，在文件处理过程中，文件处理程序根据设定的流量阈值对数据流量进行控制，该流量阈值可以是保存在配置文件中的静态参数，也可以是文件处理过程中通过外部流量控制指令实时控制的动态参数，其中，文件处理程序收到流量控制指令后，根据流量控制指令进行相应的流量控制处理，例如，流量控制指令为不限制指令，则无条件的处理所有文件；流量控制指令为阻塞指令，则立刻返回不处理任何文件；流量控制指令为有条件限制指令，则根据流量阈值控制文件处理的速度。
下面结合附图及具体实施例对本发明技术方案作进一步详细说明。
一种文件处理过程中流量控制设备，如图1所示，至少包括处理模块，以及与处理模块相连的指令接收模块、判断模块。下面介绍各模块的功能。
指令接收模块，用于接收外部的流量控制指令，并将所接收的流量控制指令发送到处理模块；
判断模块，用于在文件处理过程中实时判断当前处理速度是否超过流量阈值，并将判断结果发送到处理模块；
其中，流量阈值可以是保存在配置文件中的，此时，判断模块从配置文件中读取流量阈值，以进行判断操作；文件处理过程中当前处理速度可以按照现有技术通过检测获取。
处理模块，用于接收判断模块发来的判断结果，当判断结果是当前处理速度超过流量阈值，则在单位时间内暂停处理文件；当判断结果是当前处理速度未超过流量阈值时，正常处理文件；处理模块还用于接收指令接收模块发送的流量控制指令，并根据流量控制指令进行相应的操作；
其中，若处理模块接收到的流量控制指令为无限制指令时，则无条件地处理扫描到的文件；
若处理模块接收到的流量控制指令为一般限制指令时，则对流量阈值进行判断，如果超过流量阈值，则停止文件的处理，如果未达到流量阈值，则继续文件的处理；
若处理模块接收到的流量控制指令为阻塞指令时，则直接返回，对文件不做任何处理，并结束本流程。
下面介绍上述设备在文件处理过程中实现流量控制的过程，如图2所示，包括以下步骤：
步骤201：在文件处理过程中，文件处理程序实时判断当前处理速度是否超过设定的流量阈值，如果是，则在单位时间内暂停处理文件，否则正常处理，进入步骤202；
该步骤中，设定的流量阈值可以保存在配置文件中；文件处理过程中当前处理速度可以按照现有技术通过检测获取。
步骤202：文件处理程序判断是否接收到流量控制指令，如果是，进入步骤203，否则返回步骤201；
步骤203：文件处理程序解析流量控制指令，并根据不同的流量控制指令进行相应的操作，其中，文件处理程序接收的流量控制指令是指令触发模块发送的，指令触发模块可以根据人为控制发送流量控制指令；
该步骤中，若文件处理程序接收到的流量控制指令为无限制指令时，则无条件地处理扫描到的文件；
若文件处理程序接收到的流量控制指令为一般限制指令时，则对流量阈值进行判断，如果超过流量阈值，则停止文件的处理，如果未达到流量阈值，则继续文件的处理，其中，这里所说的流量阈值可以是设定的流量阈值(即保存在配置文件中的流量阈值)，也可以是在一般限制指令中所指示的流量阈值；
若文件处理程序接收到的流量控制指令为阻塞指令时，则直接返回，对文件不做任何处理，并结束本流程。
在其他实施例中，也可以先执行步骤203，再执行步骤201，即在整个文件处理的过程中，是根据实时判断当前处理速度是否超过流量阈值的情况以及接收的外部触发的流量控制指令的情况进行动态的流量控制。
从上述实施例可以看出，本发明技术方案与现有技术相比较，提出了流量控制处理，根据现场实际需要，制定相应的流量控制策略，通过实时读取配置文件或者手工发送消息实现动态的流量控制修改，从而提高了程序运行的整体稳定性和灵活性。另一方面，通过流量控制的方法，在上游流程中控制文件的处理，达到了简化***的处理流程的目的。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明所附的权利要求的保护范围之内。

Claims (10)

1、一种文件处理过程中流量控制方法，其特征在于，包括：
文件处理过程中，文件处理程序实时判断是否接收到流量控制指令，当所述文件处理程序接收到所述流量控制指令时，根据所接收的流量控制指令控制文件处理速度。
2、如权利要求1所述的方法，其特征在于，
所述文件处理程序实时判断是否接收到所述流量控制指令的同时，还判断当前处理速度是否超过设定的流量阈值，若当前处理速度超过所述流量阈值时，则所述文件处理程序在单位时间内限制文件处理速度。
3、如权利要求2所述的方法，其特征在于，
所述文件处理程序判断当前处理速度是否超过所述流量阈值的过程是：通过读取配置文件中设定的流量阈值，以判断当前处理速度是否超过设定的流量阈值。
4、如权利要求1、2或3所述的方法，其特征在于，
所述流量控制指令为无限制指令、一般限制指令或者阻塞指令。
5、如权利要求4所述的方法，其特征在于，
所述文件处理程序接收到所述无限制指令时，则无条件的处理扫描到的文件；
所述文件处理程序接收到所述一般限制指令时，则进一步判断当前处理速度是否超过流量阈值，如果超过流量阈值，则停止文件的处理；如果未达到流量阈值，则继续文件的处理；
所述文件处理程序接收到所述阻塞指令时，则直接返回，对文件不做任何处理，结束操作。
6、一种文件处理过程中流量控制设备，其特征在于，至少包括指令接收模块以及处理模块，其中：
所述指令接收模块，用于接收外部的流量控制指令，并将所述接收的流量控制指令发送到所述处理模块；
所述处理模块，用于接收所述判断模块发送的判断结果，当所接收的判断结果是当前处理速度超过所述流量阈值时，则在单位时间内限制文件处理速度，以及用于接收所述指令接收模块发送的流量控制指令，并根据所接收的流量控制指令进行相应的处理。
7、如权利要求6所述的设备，其特征在于，
该设备还包括判断模块，所述判断模块，用于在文件处理过程中实时判断当前处理速度是否超过设定的流量阈值，并将判断结果发送到所述处理模块。
8、如权利要求7所述的设备，其特征在于，
所述判断模块，读取配置文件中设定的流量阈值，并实时判断当前处理速度是否超过所述流量阈值。
9、如权利要求6、7或8所述的设备，其特征在于，
所述流量控制指令为无限制指令、一般限制指令或者阻塞指令。
10、如权利要求9所述的设备，其特征在于，
所述处理模块，接收到所述无限制指令时，则无条件的处理扫描到的文件；
接收到所述一般限制指令时，则进一步判断当前处理速度是否超过流量阈值，如果超过流量阈值，则停止文件的处理；如果未达到流量阈值，则继续文件的处理；
接收到所述阻塞指令时，则直接返回，对文件不做任何处理，结束操作。
CNA200910150760XA 2009-06-30 2009-06-30 一种文件处理过程中流量控制方法及设备 Pending CN101600174A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CNA200910150760XA CN101600174A (zh) 2009-06-30 2009-06-30 一种文件处理过程中流量控制方法及设备
PCT/CN2010/072047 WO2010145314A1 (zh) 2009-06-30 2010-04-22 一种文件处理过程中流量控制方法及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA200910150760XA CN101600174A (zh) 2009-06-30 2009-06-30 一种文件处理过程中流量控制方法及设备

Publications (1)

Publication Number Publication Date
CN101600174A true CN101600174A (zh) 2009-12-09

Family

ID=41421370

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA200910150760XA Pending CN101600174A (zh) 2009-06-30 2009-06-30 一种文件处理过程中流量控制方法及设备

Country Status (2)

Country Link
CN (1) CN101600174A (zh)
WO (1) WO2010145314A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010145314A1 (zh) * 2009-06-30 2010-12-23 中兴通讯股份有限公司 一种文件处理过程中流量控制方法及设备
CN104022897A (zh) * 2014-05-26 2014-09-03 上海斐讯数据通信技术有限公司 限制交换机命令执行速度的方法
CN106569893A (zh) * 2015-10-09 2017-04-19 阿里巴巴集团控股有限公司 流量控制方法及设备

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101175044B (zh) * 2007-12-05 2011-10-26 华为软件技术有限公司 信息流量许可控制方法及装置
CN101286937B (zh) * 2008-05-16 2011-01-05 成都市华为赛门铁克科技有限公司 一种网络流量控制方法、装置及***
CN101404811B (zh) * 2008-11-17 2010-12-08 中兴通讯股份有限公司 一种小区短信的流量控制方法及***
CN101600174A (zh) * 2009-06-30 2009-12-09 中兴通讯股份有限公司 一种文件处理过程中流量控制方法及设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010145314A1 (zh) * 2009-06-30 2010-12-23 中兴通讯股份有限公司 一种文件处理过程中流量控制方法及设备
CN104022897A (zh) * 2014-05-26 2014-09-03 上海斐讯数据通信技术有限公司 限制交换机命令执行速度的方法
CN106569893A (zh) * 2015-10-09 2017-04-19 阿里巴巴集团控股有限公司 流量控制方法及设备
CN106569893B (zh) * 2015-10-09 2021-02-05 阿里巴巴集团控股有限公司 流量控制方法及设备

Also Published As

Publication number Publication date
WO2010145314A1 (zh) 2010-12-23

Similar Documents

Publication Publication Date Title
CN107959715B (zh) 基于无线通讯的远程终端信息识别软件方法
CN104219316A (zh) 一种分布式***中的调用请求处理方法及装置
CN102081554A (zh) 云计算操作***及其内核控制***及方法
CN107678844B (zh) 断点智能分流方法、电子装置及计算机可读存储介质
CN101887410A (zh) 文件转换装置、文件转换方法以及文件转换程序
CN104461742A (zh) 计算设备优化方法及装置
CN103677988B (zh) 用于软件***的多进程通讯方法及***
CN107026871A (zh) 一种基于云计算的Web漏洞扫描方法
CN106547683A (zh) 一种冗余代码检测方法及装置
CN101600174A (zh) 一种文件处理过程中流量控制方法及设备
CN105718307A (zh) 进程管理方法及进程管理装置
CN101853174A (zh) 一种字符串资源定义与调用的同步方法及装置
CN112214303A (zh) Kubernetes集群自动缩放***
CN100433651C (zh) 保证网管和网元配置数据一致性的方法及***
Zhao et al. Research on the priority-based soft real-time task scheduling in TinyOS
CN108509257B (zh) 一种基于多线程的消息处理方法及装置
CN103309676A (zh) 用于海洋数值模拟ROMS的Web服务封装方法以及***
US7437733B2 (en) System and method for using a mobile agent object to collect data
CN105721539A (zh) 一种基于行为特征的短信分类装置及方法
CN111541646A (zh) 一种增强密码机安全服务接入能力的方法
CN102571481B (zh) 一种客户端监控状态分析的方法及***
CN102780616A (zh) 基于多核处理器的报文处理方法、装置和网络设备
CN115794355A (zh) 任务处理方法、装置、终端设备及存储介质
CN102546734A (zh) 数据信息处理***及方法
CN106304122A (zh) 一种业务数据分析方法及***

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Open date: 20091209