CN104965810A - 多核模式下快速处理数据报文的方法及装置 - Google Patents
多核模式下快速处理数据报文的方法及装置 Download PDFInfo
- Publication number
- CN104965810A CN104965810A CN201510230899.0A CN201510230899A CN104965810A CN 104965810 A CN104965810 A CN 104965810A CN 201510230899 A CN201510230899 A CN 201510230899A CN 104965810 A CN104965810 A CN 104965810A
- Authority
- CN
- China
- Prior art keywords
- message
- core
- list item
- real time
- user space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提出了一种多核模式下快速处理数据报文的方法及装置。该方法包括:规则表项建立步骤:将管理报文上送至运行在多核中至少一个核上的用户态程序,以使用户态程序基于所述管理报文建立发送规则表项,所述发送规则表项包括所有业务报文的特征和与之对应的发送规则;收包步骤:从服务器的硬件端口对实时业务报文进行收包,将所述实时业务报文上送至运行在多核中其它至少一个核上的用户态程序;转发步骤:根据实时业务报文的特征查找所述发送规则表项,并按相应的发送规则转发所述实时业务报文。采用该方法可以提高数据报文处理的速度,提高中央处理器的数据处理能力。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种多核模式下快速处理数据报文的方法。此外,本发明还涉及一种多核模式下快速处理数据报文的装置。
背景技术
现有技术中,中央处理器CPU首先通过套接字socket接收数据报文,然后根据数据报文的类型对数据报文进行相应的处理,其中数据报文包括管理报文和业务报文,管理报文的数据载荷内容中包括发送规则表项,发送业务报文之前,根据业务报文的特点查找规则表项并按相应的规则转发出去,所有的处理过程都是通过socket完成,由于socket是在协议栈基础上运行的,数据报文处理的全过程都需要TCP/IP协议栈的参与。
另外,数据报文的处理都是在用户态进行的,数据报文从内核态上送至用户态时首先要经过TCP/IP协议栈,并且有数据拷贝的动作,整个数据报文的处理流程相对来说比较复杂,业务报文的处理速度比较慢,影响中央处理器的数据处理性能。因此,需要一种多核模式下快速处理业务数据报文的方法,以解决现有技术中存在的上述技术问题。
发明内容
本发明提供一种多核模式下快速处理业务数据报文的方法。采用所述多核模式下快速处理业务数据报文的方法可以提高数据报文处理的速度,提高中央处理器的数据处理能力。此外,本发明还提供了一种多核模式下快速处理业务数据报文的装置。
本发明采用的技术方案是:
一种多核模式下快速处理数据报文的方法,其包括:规则表项建立步骤:将管理报文上送至运行在多核中至少一个核上的用户态程序,以使用户态程序基于所述管理报文建立发送规则表项,所述发送规则表项包括所有业务报文的特征和与之对应的发送规则;收包步骤:从服务器的硬件端口对实时业务报文进行收包,将所述实时业务报文上送至运行在多核中其它至少一个核上的用户态程序;转发步骤:根据实时业务报文的特征查找所述发送规则表项,并按相应的发送规则转发所述实时业务报文。
优选地,在规则表项建立步骤中,通过协议栈将所述管理报文上送至运行在所述多核中至少一个核上的用户态程序,和/或,根据设定的五元组规则建立所述发送规则表项。
优选地,在规则表项建立步骤中,提取所述管理报文中数据载荷的内容,以获取所述设定的五元组规则。
优选地,在规则表项建立步骤中,根据硬核分配策略将所述管理报文上送至运行在所述多核中至少一个核上的用户态程序;在收包步骤中,根据所述硬核分配策略将所述实时业务报文上送至运行在所述多核中其它至少一个核上的用户态程序。
优选地,收包步骤中,通过轮询的方式从所述服务器的硬件端口对所述实时业务报文进行收包。
本发明还提供了一种多核模式下快速处理数据报文的装置,设置于服务器中,其包括:规则表项建立模块,用于将管理报文上送至运行在多核中至少一个核上的用户态程序,以使用户态程序基于所述管理报文建立发送规则表项,所述发送规则表项包括所有业务报文的特征和与之对应的发送规则;收包模块,用于从服务器的硬件端口对实时业务报文进行收包,将所述实时业务报文上送至运行在多核中其它至少一个核上的用户态程序;转发模块,用于根据实时业务报文的特征查找所述发送规则表项,并按相应的发送规则转发所述实时业务报文。
优选地,所述规则表项建立模块,还用于通过协议栈将所述管理报文上送至运行在多核中至少一个核上的用户态程序,和/或,还用于根据设定的五元组规则建立所述发送规则表项。
优选地,所述规则表项建立模块,还用于提取所述管理报文中数据载荷的内容,以获取所述设定的五元组规则。
优选地,所述规则表项建立模块还用于,根据硬核分配策略将所述管理报文上送至运行在所述多核中至少一个核上的用户态程序;所述收包模块还用于,根据所述硬核分配策略将所述实时业务报文上送至运行在所述多核中其它至少一个核上的用户态程序。
优选地,所述收包模块还用于,通过轮询的方式从所述服务器的硬件端口对所述实时业务报文进行收包。
采用上述技术方案,本发明至少具有下列优点:采用本发明的多模式下快速处理数据报文的方法可以实现对管理报文的可靠处理,而实现对业务报文的快速处理,减少了业务报文拷贝的次数,简化了***的处理流程,提高了服务器的数据处理能力。
附图说明
图1为本发明第一实施例的多核模式下快速处理业务数据报文的方法的流程图;
图2为本发明第二优选实施例的多核模式下快速处理业务数据报文的装置的示意图。
其中,100-规则表项建立模块;200-收包模块;300-转发模块。
具体实施方式
为更进一步阐述本发明为达成预定目的所采取的技术手段及功效,以下结合附图及较佳实施例,对本发明进行详细说明如后。
本发明提供的多核模式下快速处理数据报文的方法能够实现数据报文的快速处理,下面将详细地描述本发明的多核模式下快速处理业务数据报文的方法及其各个步骤。
第一实施例
如图1所示,本实施例中的多核模式下快速处理数据报文的方法是在服务器采用对称多处理SMP架构下实现的,由此可以将管理报文和业务报文分开来分别处理。具体地,如图中示出的,该方法包括规则表项建立步骤S10、收包步骤S20和转发步骤S30。其中,规则表项建立步骤S10:将管理报文上送至运行在多核中至少一个核上的用户态,以使用户态程序基于管理报文建立发送规则表项,发送规则表项包括所有业务报文的特征和与之对应的发送规则。多核模式下是指一个CPU包括多个核,数据报文可以由指定的核处理,也可以分发到所有的核上同时处理。具体执行过程中,用户可以通过以太网端口向服务器下发包括发送规则表项的管理报文,将实时业务报文通过高速端口上送服务器。从而从服务器的不同硬件端口向服务器分开发送管理报文和业务报文。规则表项建立步骤S10是将管理报文发送至多核中至少一个核上的用户态。服务器接收到管理报文后提取并且存储发送规则表项。作为优选地,可以根据硬核分配策略将管理报文上送至运行在多核中至少一个核上的用户态程序,例如硬核分配策略可以采用哈希策略,由此确定出负责处理管理报文的核。发送规则表项的建立可以依据不同的方式,只要发送规则表项中包括所有业务报文的特征和与之对应的发送规则即可。进一步地,根据设定的五元组规则建立发送规则表项。数据报文的五元组包括源IP地址、目的IP地址、源端口、目的端口和协议类型,设定的五元组规则是基于上述五元组中各项的不同取值采用对应的发送规则。另外,规则表项建立步骤S10中,数据载荷中的内容包含设定的五元组规则,提取管理报文中数据载荷的内容来获取设定的五元组规则,。由此可以看出,规则表项建立步骤S10之前,预先将设定的五元组规则设置在管理报文的数据载荷中,当运行在多核中的至少一个核上的用户态程序接收到管理报文后,提取管理报文的数据载荷中包括的设定的五元组规则。此外,在规则表项建立步骤S10中,通过协议栈例如TCP/IP协议栈,将管理报文上送至运行在多核中至少一个核上的用户态。采用协议栈可以保证管理报文传输的可靠性,确保管理报文的稳定处理。管理报文的到来是通过服务器的硬件端口例如以太网端口发送中断信号通知服务器,由此服务器将管理报文上送至运行在多核中至少一个核上的用户态程序。
收包步骤S20:从服务器的硬件端口对实时业务报文进行收包至运行在多核中其它至少一个核上的用户态程序。在收包步骤S20中,根据硬核分配策略将实时业务报文以零拷贝的模式上送至运行在多核中其它至少一个核上的用户态程序。优选地,收包步骤中,通过轮询的方式从服务器的硬件端口对实时业务报文进行收包。例如根据哈希策略将实时业务报文上送至运行在多核中其它至少一个核上的用户态程序。轮流问询各个硬件端口,如果其中一个硬件端口上送来实时业务报文,则直接收包,由此实时业务报文不经过TCP/IP协议栈,用户直接处理裸数据报文,简化了数据处理的流程,减少了实时业务报文拷贝的次数,提高了服务器的业务报文处理能力。
转发步骤S30:基于实时业务报文的特征查找发送规则表项,并按相应的发送规则转发实时业务报文。用户态程序获取实时业务报文的特征,例如实时业务报文的特征可以是预先设置在业务报文的数据载荷中,用户态程序提取该实时业务报文的特征,然后查找发送规则表项中是否存在该实时业务报文的特征,如果存在,则按发送规则表项中该实时业务报文的特征所对应的发送规则转发实时业务报文。如果不存在,则按默认设置的发送规则转发实时业务报文。
第二实施例
如图2所示,本发明提供的多核模式下快速处理数据报文的装置,其在采用对称多处理SMP架构下,包括规划表项建立模块100、收包模块200和转发模块300。
具体地,规则表项建立模块100,用于将管理报文上送至运行在多核中至少一个核上的用户态程序,以使用户态程序基于管理报文建立发送规则表项,发送规则表项包括所有业务报文的特征和与之对应的发送规则。作为优选地,规则表项建立模块100,还用于通过协议栈将管理报文上送至运行在多核中至少一个核上的用户态程序。由此提高管理报文传输的可靠性。进一步地,规则表项建立模块100还用于根据设定的五元组规则建立发送规则表项。另外,规则表项建立模块,还用于提取管理报文中数据载荷的内容,管理报文的数据载荷中预先设置有上述设定的五元组规则,由此可以获取设定的五元组规则。此外,规则表项建立模块100还用于,根据硬核分配策略将管理报文上送至运行在多核中至少一个核上的用户态程序。收包模块还用于,根据硬核分配策略将实时业务报文上送至运行在多核中其它至少一个核上的用户态程序。上述硬核分配策略可以是哈希策略,也可以是其它硬核分配策略。
收包模块200,用于从服务器的硬件端口对实时业务报文进行收包,将实时业务报文上送至运行在多核中其它至少一个核上的用户态程序。由此可以从硬件端口对实时业务报文直接进行收包,减少了文件拷贝的次数,提高了数据处理的速度。进一步地,收包模块还用于,通过轮询的方式从硬件端口对实时业务报文进行收包。
转发模块300,用于基于实时业务报文的特征查找发送规则表项,以按相应的发送规则转发实时业务报文。如果发送规则表项中存在该实时业务报文的特征,则按与该实时业务报文的特征对应的发送规则查找相应的发送规则,由此按照确定出来的发送规则转发实时业务报文。由此可以看出,管理报文和业务报文都是在用户态程序上进行处理,两者之间的数据可以方便共享,提高了业务报文处理的速度。
第三实施例
本实施例中提供的服务器包括如第二实施例中描述的多核模式下快速处理数据报文的装置。
通过具体实施方式的说明,应当可对本发明为达成预定目的所采取的技术手段及功效得以更加深入且具体的了解,然而所附图示仅是提供参考与说明之用,并非用来对本发明加以限制。
Claims (10)
1.一种多核模式下快速处理数据报文的方法,其特征在于,包括:
规则表项建立步骤:将管理报文上送至运行在多核中至少一个核上的用户态程序,以使用户态程序基于所述管理报文建立发送规则表项,所述发送规则表项包括所有业务报文的特征和与之对应的发送规则;
收包步骤:从服务器的硬件端口对实时业务报文进行收包,将所述实时业务报文上送至运行在多核中其它至少一个核上的用户态程序;
转发步骤:根据实时业务报文的特征查找所述发送规则表项,并按相应的发送规则转发所述实时业务报文。
2.根据权利要求1所述的多核模式下快速处理数据报文的方法,其特征在于,在规则表项建立步骤中,通过协议栈将所述管理报文上送至运行在所述多核中至少一个核上的用户态程序,和/或,根据设定的五元组规则建立所述发送规则表项。
3.根据权利要求2所述的多核模式下快速处理数据报文的方法,其特征在于,在规则表项建立步骤中,提取所述管理报文中数据载荷的内容,以获取所述设定的五元组规则。
4.根据权利要求1所述的多核模式下快速处理数据报文的方法,其特征在于,
在规则表项建立步骤中,根据硬核分配策略将所述管理报文上送至运行在所述多核中至少一个核上的用户态程序;
在收包步骤中,根据所述硬核分配策略将所述实时业务报文上送至运行在所述多核中其它至少一个核上的用户态程序。
5.根据权利要求1至4中任一项所述的多核模式下快速处理数据报文的方法,其特征在于,收包步骤中,通过轮询的方式从所述服务器的硬件端口对所述实时业务报文进行收包。
6.一种多核模式下快速处理数据报文的装置,设置于服务器中,其特征在于,包括:
规则表项建立模块,用于将管理报文上送至运行在多核中至少一个核上的用户态程序,以使用户态程序基于所述管理报文建立发送规则表项,所述发送规则表项包括所有业务报文的特征和与之对应的发送规则;
收包模块,用于从服务器的硬件端口对实时业务报文进行收包,将所述实时业务报文上送至运行在多核中其它至少一个核上的用户态程序;
转发模块,用于根据实时业务报文的特征查找所述发送规则表项,并按相应的发送规则转发所述实时业务报文。
7.根据权利要求6所述的多核模式下快速处理数据报文的装置,其特征在于,所述规则表项建立模块,还用于通过协议栈将所述管理报文上送至运行在多核中至少一个核上的用户态程序,和/或,还用于根据设定的五元组规则建立所述发送规则表项。
8.根据权利要求7所述的多核模式下快速处理数据报文的装置,其特征在于,所述规则表项建立模块,还用于提取所述管理报文中数据载荷的内容,以获取所述设定的五元组规则。
9.根据权利要求6所述的多核模式下快速处理数据报文的装置,其特征在于,所述规则表项建立模块还用于,根据硬核分配策略将所述管理报文上送至运行在所述多核中至少一个核上的用户态程序;
所述收包模块还用于,根据所述硬核分配策略将所述实时业务报文上送至运行在所述多核中其它至少一个核上的用户态程序。
10.根据权利要求6-9中任一项所述多核模式下快速处理数据报文的装置,其特征在于,所述收包模块还用于,通过轮询的方式从所述服务器的硬件端口对所述实时业务报文进行收包。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510230899.0A CN104965810B (zh) | 2015-05-08 | 2015-05-08 | 多核模式下快速处理数据报文的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510230899.0A CN104965810B (zh) | 2015-05-08 | 2015-05-08 | 多核模式下快速处理数据报文的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104965810A true CN104965810A (zh) | 2015-10-07 |
CN104965810B CN104965810B (zh) | 2018-08-21 |
Family
ID=54219845
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510230899.0A Expired - Fee Related CN104965810B (zh) | 2015-05-08 | 2015-05-08 | 多核模式下快速处理数据报文的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104965810B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105227493A (zh) * | 2015-10-15 | 2016-01-06 | 上海斐讯数据通信技术有限公司 | 多核平台下提高数据报文转发性能的方法 |
CN106254578A (zh) * | 2016-09-28 | 2016-12-21 | 深圳震有科技股份有限公司 | 双核amp***构架下的以太网报文透传方法及*** |
CN106453625A (zh) * | 2016-11-17 | 2017-02-22 | 东软集团股份有限公司 | 信息同步方法及高可用性集群*** |
CN106713185A (zh) * | 2016-12-06 | 2017-05-24 | 瑞斯康达科技发展股份有限公司 | 一种多核cpu的负载均衡方法及装置 |
CN111736982A (zh) * | 2020-05-12 | 2020-10-02 | 深圳震有科技股份有限公司 | 一种5g数据转发平面的数据转发处理方法和服务器 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102355415A (zh) * | 2011-09-27 | 2012-02-15 | 瑞斯康达科技发展股份有限公司 | 一种cpu间报文传输方法及装置 |
CN102710497A (zh) * | 2012-04-24 | 2012-10-03 | 汉柏科技有限公司 | 多核多线程网络设备的报文处理方法及*** |
CN102868647A (zh) * | 2012-09-26 | 2013-01-09 | 大唐移动通信设备有限公司 | 一种基于Linux网络内核的数据处理方法和装置 |
US20140181531A1 (en) * | 2009-12-23 | 2014-06-26 | Citrix Systems, Inc. | Systems and methods for queue level ssl card mapping to multi-core packet engine |
CN104468381A (zh) * | 2014-12-01 | 2015-03-25 | 国家计算机网络与信息安全管理中心 | 一种多域流规则匹配的实现方法 |
CN104601468A (zh) * | 2015-01-13 | 2015-05-06 | 杭州华三通信技术有限公司 | 报文转发方法和设备 |
-
2015
- 2015-05-08 CN CN201510230899.0A patent/CN104965810B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140181531A1 (en) * | 2009-12-23 | 2014-06-26 | Citrix Systems, Inc. | Systems and methods for queue level ssl card mapping to multi-core packet engine |
CN102355415A (zh) * | 2011-09-27 | 2012-02-15 | 瑞斯康达科技发展股份有限公司 | 一种cpu间报文传输方法及装置 |
CN102710497A (zh) * | 2012-04-24 | 2012-10-03 | 汉柏科技有限公司 | 多核多线程网络设备的报文处理方法及*** |
CN102868647A (zh) * | 2012-09-26 | 2013-01-09 | 大唐移动通信设备有限公司 | 一种基于Linux网络内核的数据处理方法和装置 |
CN104468381A (zh) * | 2014-12-01 | 2015-03-25 | 国家计算机网络与信息安全管理中心 | 一种多域流规则匹配的实现方法 |
CN104601468A (zh) * | 2015-01-13 | 2015-05-06 | 杭州华三通信技术有限公司 | 报文转发方法和设备 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105227493A (zh) * | 2015-10-15 | 2016-01-06 | 上海斐讯数据通信技术有限公司 | 多核平台下提高数据报文转发性能的方法 |
CN106254578A (zh) * | 2016-09-28 | 2016-12-21 | 深圳震有科技股份有限公司 | 双核amp***构架下的以太网报文透传方法及*** |
CN106254578B (zh) * | 2016-09-28 | 2019-07-12 | 深圳震有科技股份有限公司 | 双核amp***构架下的以太网报文透传方法及*** |
CN106453625A (zh) * | 2016-11-17 | 2017-02-22 | 东软集团股份有限公司 | 信息同步方法及高可用性集群*** |
CN106453625B (zh) * | 2016-11-17 | 2019-05-17 | 东软集团股份有限公司 | 信息同步方法及高可用性集群*** |
CN106713185A (zh) * | 2016-12-06 | 2017-05-24 | 瑞斯康达科技发展股份有限公司 | 一种多核cpu的负载均衡方法及装置 |
CN106713185B (zh) * | 2016-12-06 | 2019-09-13 | 瑞斯康达科技发展股份有限公司 | 一种多核cpu的负载均衡方法及装置 |
CN111736982A (zh) * | 2020-05-12 | 2020-10-02 | 深圳震有科技股份有限公司 | 一种5g数据转发平面的数据转发处理方法和服务器 |
CN111736982B (zh) * | 2020-05-12 | 2023-12-08 | 深圳震有科技股份有限公司 | 一种5g数据转发平面的数据转发处理方法和服务器 |
Also Published As
Publication number | Publication date |
---|---|
CN104965810B (zh) | 2018-08-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104965810A (zh) | 多核模式下快速处理数据报文的方法及装置 | |
US11223708B2 (en) | Scalable sockets for QUIC | |
CN104184828A (zh) | 混合网络***、通信方法和网络节点 | |
CN102480430B (zh) | 实现报文保序的方法和装置 | |
EP2942914A1 (en) | Load sharing method and apparatus | |
CN103532876A (zh) | 数据流的处理方法与*** | |
US11394804B2 (en) | System and method for stateless distribution of bidirectional flows with network address translation | |
CN109729115B (zh) | 实现分布式计算的方法、装置、代理服务器、终端设备 | |
CN102801635A (zh) | 在多核处理器***中使用的报文保序方法 | |
CN104038425A (zh) | 转发以太网报文的方法和装置 | |
US8650313B2 (en) | Endpoint discriminator in network transport protocol startup packets | |
CN114900496B (zh) | 一种通信方法以及相关设备 | |
CN110798495A (zh) | 用于在集群架构模式下端到端的消息推送的方法和服务器 | |
WO2017032110A1 (zh) | 一种应用消息的处理***、方法及应用设备 | |
CN105025042B (zh) | 一种确定数据信息的方法及***、代理服务器 | |
CN110753043B (zh) | 一种通信方法、装置、服务器及介质 | |
CN103491030A (zh) | 一种数据处理方法及设备 | |
CN106155643A (zh) | 一种基于java_nio技术的手机网络游戏引擎 | |
US11062803B2 (en) | Medical data processing method, cluster processing system and method thereof | |
JP3221757U (ja) | ブルートゥースゲートウェイ装置 | |
TW201445500A (zh) | 顯示適配器控制系統、控制方法及電腦裝置 | |
JP7384952B2 (ja) | ネットワークロードバランサー、リクエストメッセージの割り当て方法、プログラム製品及びシステム | |
US8751603B2 (en) | Exploiting cluster awareness infrastructure through internet socket based applications | |
WO2015117502A1 (zh) | 报文收发方法及装置、通道单元及通信设备 | |
CN105264503B (zh) | 一种硬盘之间的交互方法、装置及*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180821 Termination date: 20190508 |