CN106161169A - 一种多主机网络交换*** - Google Patents
一种多主机网络交换*** Download PDFInfo
- Publication number
- CN106161169A CN106161169A CN201610872839.3A CN201610872839A CN106161169A CN 106161169 A CN106161169 A CN 106161169A CN 201610872839 A CN201610872839 A CN 201610872839A CN 106161169 A CN106161169 A CN 106161169A
- Authority
- CN
- China
- Prior art keywords
- pcie
- card
- switch module
- node
- bus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q11/00—Selecting arrangements for multiplex systems
- H04Q11/0001—Selecting arrangements for multiplex systems using optical switching
- H04Q11/0005—Switch and router aspects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/40—Bus networks
- H04L12/40006—Architecture of a communication node
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q11/00—Selecting arrangements for multiplex systems
- H04Q11/0001—Selecting arrangements for multiplex systems using optical switching
- H04Q11/0005—Switch and router aspects
- H04Q2011/0052—Interconnection of switches
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明公开了一种多主机网络交换***,包括若干个计算节点、若干个PCIE SWITCH模块以及PCIE卡组;每个计算节点分别通过PCIE总线与各个PCIE SWITCH模块的上行端口相连;每个PCIE SWITCH模块的下行端口均通过PCIE总线连接一组PCIE卡组;PCIE卡组内的PCIE卡分别与对应的网络设备连接;PCIE SWITCH模块用于将通过对应的PCIE卡组连接的网络设备虚拟化共享至各个计算节点。本发明中将PCIE卡组独立于计算节点之外,提高了PCIE卡的配置灵活性,同时成本低且便于管理。
Description
技术领域
本发明涉及服务器网络连接技术领域,特别是涉及一种多主机网络交换***。
背景技术
服务器需要通过网卡连接相应的交换机,进而连入网络内。由于PCIE总线传输距离有限,传统服务器的以太网卡或光纤网卡都集成在计算节点内部,即然后通过外部以太网或光纤交换机与网络连接。如图1所示,图1为目前的多主机网络交换***的结构示意图。其中,NODE0-NODE7为计算节点,LAN为以太网卡,FC为光纤网卡。
然而,在该种结构中,将以太网卡和光纤网卡集成于计算节点内的话,计算节点内需要设置相应的卡槽,导致占用了计算节点内很大的位置且这种结构不便于依据用户的不同需求配置PCIE卡(例如以太网卡或光纤网卡)的数量及类型,灵活性差。并且每个计算节点内均需要集成一组PCIE卡,PCIE卡的数量多,成本高;同时,由于每个计算节点内的以太网卡以及光纤网卡均要与对应的交换机连接,当计算节点过多或要构建大型集群时,会导致外部线缆多且杂乱,管理不便。其中,这里的计算节点代表一个物理主机。
因此,如何提供一种配置灵活性高、成本低且便于管理的多主机网络交换***是本领域技术人员目前需要解决的问题。
发明内容
本发明的目的是提供一种多主机网络交换***,将PCIE卡组单独设置,PCIE卡的配置灵活性高,成本低且便于管理。
为解决上述技术问题,本发明提供了一种多主机网络交换***,包括若干个计算节点、若干个PCIE SWITCH模块以及PCIE卡组;
每个所述计算节点分别通过PCIE总线与各个PCIE SWITCH模块的上行端口相连;
每个所述PCIE SWITCH模块的下行端口均通过PCIE总线连接一组所述PCIE卡组;所述PCIE卡组内的PCIE卡分别与对应的网络设备连接;
所述PCIE SWITCH模块用于将通过对应的PCIE卡组连接的网络设备虚拟化共享至各个所述计算节点。
优选地,包括两个所述PCIE SWITCH模块。
优选地,还包括:
分别与各个所述计算节点一一对应的若干个PCIE retimer模块,每个所述PCIEretimer模块一端通过PCIE总线与对应的计算节点相连,另一端分别通过PCIE总线连接各个所述PCIE SWITCH模块的上行端口;
所述PCIE retimer模块用于对所述计算节点发送的PCIE信号进行增强处理。
优选地,所述PCIE卡组包括若干个以太网卡以及若干个光纤网卡;
相应的,与所述以太网卡对应的网络设备为以太网交换机;与所述光纤网卡对应的网络设备为光纤交换机。
优选地,所述PCIE总线具体为PCIE3.0x8总线。
优选地,所述计算节点、所述PCIE retimer模块以及所述PCIE SWITCH模块设置于服务器的主板上,所述PCIE卡组设置于子板上。
本发明提供了一种多主机网络交换***,将PCIE卡组设置于计算节点的外部,各个计算节点分别通过PCIE SWITCH模块连接PCIE卡组;PCIE SWITCH模块通过PCIE卡组连接相应的网络设备,并将连接的网络设备虚拟化共享至各个计算节点。即在本发明中,将PCIE卡组单独设置,独立于计算节点之外,设置PCIE卡槽时不再受到计算节点的体积等因素的限制,大大提高了***配置的灵活性。并且,本发明通过PCIE SWITCH模块实现了将一组PCIE卡组共享至各个计算节点,即每个PCIE SWITCH模块均能实现将与其连接的几个网络设备共享至各个计算节点的操作,在此过程中,仅需各个计算节点与该PCIE SWITCH模块相连即可,故减少了需要设置的PCIE卡的数量,降低了成本,同时大大减少所接线缆的数量,便于进行管理。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对现有技术和实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为目前的多主机网络交换***的结构示意图;
图2为本发明提供的一种多主机网络交换***的结构示意图;
图3为本发明提供的一种多主机网络交换***的具体实施例的结构示意图。
具体实施方式
本发明的核心是提供一种多主机网络交换***,将PCIE卡组单独设置,PCIE卡的配置灵活性高,成本低且便于管理。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供了一种多主机网络交换***,该***包括若干个计算节点、若干个PCIE SWITCH模块以及PCIE卡组;
每个计算节点分别通过PCIE总线与各个PCIE SWITCH模块的上行端口相连;
每个PCIE SWITCH模块的下行端口均通过PCIE总线连接一组PCIE卡组;PCIE卡组内的PCIE卡分别与对应的网络设备连接;
PCIE SWITCH模块用于将通过对应的PCIE卡组连接的网络设备虚拟化共享至各个计算节点。
其中,PCIE SWITCH模块支持MR-IOV(Multi Root I/O Virtualization,多根I/O虚拟化技术),PCIE卡也支持MR-IOV,使得PCIE SWITCH模块能够对网络设备进行虚拟化共享,这里的虚拟化共享指的是:假设有4个计算节点,通过一个PCIE SWITCH模块连接一个网络设备,PCIE SWITCH模块能够将该网络设备虚拟为相同的四份,分别共享至4个计算节点。
作为优选地,PCIE卡组包括若干个以太网卡以及若干个光纤网卡(Fibre ChannelHBA,FC网卡);
相应的,与以太网卡对应的网络设备为以太网交换机;与光纤网卡对应的网络设备为光纤交换机。
当然,每个PCIE卡组内包括的PCIE卡的类型以及各种类型的PCIE卡的数量本发明不作限定,每个PCIE SWITCH模块连接的PCIE卡组内的PCIE卡的类型及数量可以相同也可以不同,本发明对此也不做限定。
可以理解的是,PCIE SWITCH模块具有虚拟化共享的功能。例如若有10个计算节点,目前的情况下需要在每个计算节点内分别设置1个以太网卡以及1个光纤网卡,故共需10个以太网卡以及10个光纤网卡,而本发明中只需令一个PCIE SWITCH模块连接1个以太网卡以及1个光纤网卡即可,减少了需要设置的PCIE卡的数量,降低了成本;并且,现有技术中每个计算节点内的以太网卡以及光纤网卡均需连接相应的交换机,假设有一个以太网交换机以及一个光纤交换机的话,接线数量为20;而本发明中各个计算节点分别连接PCIESWITCH模块,接线数量为10,PCIE SWITCH模块连接2个PCIE卡,接线数量为2,可见,本发明的结构减小了接线数量,并且简化了接线的复杂程度,便于进行管理;同时,上述优点在计算节点、PCIE卡或网络设备数量较多时更为明显。
作为优选地,该***包括两个PCIE SWITCH模块。
可以理解的是,设置两个PCIE SWITCH模块是为了实现网络设备冗余的目的,当一组网络设备故障时,还可通过另一个PCIE SWITCH模块将网络设备共享至计算节点。当然,该***也可包括两个以上PCIE SWITCH模块,本发明对此不作限定。另外,不同的PCIESWITCH模块连接的PCIE卡组以及网络设备可以相同(即作为冗余)也可以不同(PCIE卡的数量过多,一个PCIE SWITCH模块不够的情况)。
参见图2所示,图2为本发明提供的一种多主机网络交换***的结构示意图;图2中计算节点数量为8,PCIE SWITCH模块的数量为2,每个PCIE SWITCH模块连接了2个以太网卡(2*10G LAN)以及两个光纤网卡(2*SG FC)。当然,本发明不限定计算节点以及PCIE SWITCH模块的数量。
作为优选地,参见图3所示,图3为本发明提供的一种多主机网络交换***的具体实施例的结构示意图。该***还包括:
分别与各个计算节点一一对应的若干个PCIE retimer模块,每个PCIE retimer模块一端通过PCIE总线与对应的计算节点相连,另一端分别通过PCIE总线连接各个PCIESWITCH模块的上行端口;
PCIE retimer模块用于对计算节点发送的PCIE信号进行增强处理。
可以理解的是,由于PCIE总线传输距离有限,而PCIE SWITCH模块的一般设置的距离计算节点较远,故需要对PCIE信号进行增强,从而保证信号的传输可靠性。
其中,PCIE总线具体为PCIE3.0x8总线。也可以为其他类型的PCIE总线,本发明对此不做限定。
作为优选地,计算节点、PCIE retimer模块以及PCIE SWITCH模块设置于服务器的主板上,PCIE卡组设置于子板上。
可以理解的是,将PCIE卡组独立于主板之外,即可以灵活的依据自身需要设置PCIE的卡槽数量以及类型,大大提高了配置灵活性。当然,将PCIE卡组设置于主板上也可。
本发明提供了一种多主机网络交换***,将PCIE卡组设置于计算节点的外部,各个计算节点分别通过PCIE SWITCH模块连接PCIE卡组;PCIE SWITCH模块通过PCIE卡组连接相应的网络设备,并将连接的网络设备虚拟化共享至各个计算节点。即在本发明中,将PCIE卡组单独设置,独立于计算节点之外,设置PCIE卡槽时不再受到计算节点的体积等因素的限制,大大提高了***配置的灵活性。并且,本发明通过PCIE SWITCH模块实现了将一组PCIE卡组共享至各个计算节点,即每个PCIE SWITCH模块均能实现将与其连接的几个网络设备共享至各个计算节点的操作,在此过程中,仅需各个计算节点与该PCIE SWITCH模块相连即可,故减少了需要设置的PCIE卡的数量,降低了成本,同时大大减少所接线缆的数量,便于进行管理。
需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其他实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (6)
1.一种多主机网络交换***,其特征在于,包括若干个计算节点、若干个PCIE SWITCH模块以及PCIE卡组;
每个所述计算节点分别通过PCIE总线与各个PCIE SWITCH模块的上行端口相连;
每个所述PCIE SWITCH模块的下行端口均通过PCIE总线连接一组所述PCIE卡组;所述PCIE卡组内的PCIE卡分别与对应的网络设备连接;
所述PCIE SWITCH模块用于将通过对应的PCIE卡组连接的网络设备虚拟化共享至各个所述计算节点。
2.根据权利要求1所述的***,其特征在于,包括两个所述PCIE SWITCH模块。
3.根据权利要求1所述的***,其特征在于,还包括:
分别与各个所述计算节点一一对应的若干个PCIE retimer模块,每个所述PCIEretimer模块一端通过PCIE总线与对应的计算节点相连,另一端分别通过PCIE总线连接各个所述PCIE SWITCH模块的上行端口;
所述PCIE retimer模块用于对所述计算节点发送的PCIE信号进行增强处理。
4.根据权利要求1-3任一项所述的***,其特征在于,所述PCIE卡组包括若干个以太网卡以及若干个光纤网卡;
相应的,与所述以太网卡对应的网络设备为以太网交换机;与所述光纤网卡对应的网络设备为光纤交换机。
5.根据权利要求4所述的***,其特征在于,所述PCIE总线具体为PCIE3.0x8总线。
6.根据权利要求3所述的***,其特征在于,所述计算节点、所述PCIE retimer模块以及所述PCIE SWITCH模块设置于服务器的主板上,所述PCIE卡组设置于子板上。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610872839.3A CN106161169A (zh) | 2016-09-30 | 2016-09-30 | 一种多主机网络交换*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610872839.3A CN106161169A (zh) | 2016-09-30 | 2016-09-30 | 一种多主机网络交换*** |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106161169A true CN106161169A (zh) | 2016-11-23 |
Family
ID=57341553
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610872839.3A Pending CN106161169A (zh) | 2016-09-30 | 2016-09-30 | 一种多主机网络交换*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106161169A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106815156A (zh) * | 2017-01-22 | 2017-06-09 | 联想(北京)有限公司 | 一种实现固态硬盘交互的装置、方法和和电子设备 |
CN107395398A (zh) * | 2017-06-23 | 2017-11-24 | 联想(北京)有限公司 | 一种控制方法及终端 |
CN112130535A (zh) * | 2020-09-18 | 2020-12-25 | 重庆欢腾科技有限公司 | 具有多层扩展架构的多主机通信***及通信方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103117929A (zh) * | 2013-01-31 | 2013-05-22 | 中国科学院计算技术研究所 | 一种基于PCIe数据交换的通信方法及*** |
CN103353861A (zh) * | 2013-06-18 | 2013-10-16 | 中国科学院计算技术研究所 | 实现分布式i/o资源池化的方法及装置 |
CN104125049A (zh) * | 2014-08-08 | 2014-10-29 | 浪潮电子信息产业股份有限公司 | 一种基于brickland平台的pcie设备冗余实现方法 |
-
2016
- 2016-09-30 CN CN201610872839.3A patent/CN106161169A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103117929A (zh) * | 2013-01-31 | 2013-05-22 | 中国科学院计算技术研究所 | 一种基于PCIe数据交换的通信方法及*** |
CN103353861A (zh) * | 2013-06-18 | 2013-10-16 | 中国科学院计算技术研究所 | 实现分布式i/o资源池化的方法及装置 |
CN104125049A (zh) * | 2014-08-08 | 2014-10-29 | 浪潮电子信息产业股份有限公司 | 一种基于brickland平台的pcie设备冗余实现方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106815156A (zh) * | 2017-01-22 | 2017-06-09 | 联想(北京)有限公司 | 一种实现固态硬盘交互的装置、方法和和电子设备 |
US10614011B2 (en) | 2017-01-22 | 2020-04-07 | Lenovo (Beijing) Co., Ltd. | Apparatus, method, and electronic device for implementing solid-state drive data interaction |
CN107395398A (zh) * | 2017-06-23 | 2017-11-24 | 联想(北京)有限公司 | 一种控制方法及终端 |
CN107395398B (zh) * | 2017-06-23 | 2020-07-24 | 联想(北京)有限公司 | 一种控制方法及终端 |
CN112130535A (zh) * | 2020-09-18 | 2020-12-25 | 重庆欢腾科技有限公司 | 具有多层扩展架构的多主机通信***及通信方法 |
CN112130535B (zh) * | 2020-09-18 | 2021-12-03 | 重庆欢腾科技有限公司 | 具有多层扩展架构的多主机通信***及通信方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11223577B2 (en) | Switch network architecture | |
CN102033581B (zh) | 一种基于多核网络处理器的高可扩展性atca板 | |
EP3029884A1 (en) | Commissioning method, master control board, and service board | |
US9871749B2 (en) | Switch assembly | |
CN106161169A (zh) | 一种多主机网络交换*** | |
CN104035525A (zh) | 一种计算节点 | |
CN201926952U (zh) | 一种基于多核网络处理器的高可扩展性atca板 | |
CN103793003B (zh) | 一种交换板和刀片服务器 | |
CN104641593B (zh) | 网板和通信设备 | |
CN101924682B (zh) | 一种高级电信计算架构交换***、方法及通信设备 | |
CN103116559A (zh) | 一种高速互联服务器***的设计方法 | |
CN105530205B (zh) | 一种微波设备汇聚的装置和方法 | |
CN103067795B (zh) | 多框集群***、中央交换框及实现数据交换的方法 | |
CN103414587A (zh) | 一种机架式设备槽位分配方法及装置 | |
CN103716258B (zh) | 高密度线卡、交换设备、集群***及电信号类型配置方法 | |
CN105577752A (zh) | 一种用于融合架构服务器的管理*** | |
US9750135B2 (en) | Dual faced ATCA backplane | |
CN104765707A (zh) | 一种基于Openpower平台的PCIe Gen3 IO扩展箱设计方法 | |
CN107612777B (zh) | 一种光纤交换机检测工具及方法 | |
CN209248518U (zh) | 一种固态硬盘扩展板卡及服务器 | |
CN106095720A (zh) | 一种多路计算机*** | |
CN108768897B (zh) | 端口扩展设备和堆叠*** | |
CN204965277U (zh) | 一种支持网络负载均衡交换的刀片式服务器 | |
CN205195734U (zh) | 一种PCI Express交换机 | |
CN104243173A (zh) | 一种接口配置方法、母卡及高速子卡 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20161123 |