WO2022176172A1 - タイムスロット化した受信を使用する光ネットワークおよびノード - Google Patents

タイムスロット化した受信を使用する光ネットワークおよびノード Download PDF

Info

Publication number
WO2022176172A1
WO2022176172A1 PCT/JP2021/006454 JP2021006454W WO2022176172A1 WO 2022176172 A1 WO2022176172 A1 WO 2022176172A1 JP 2021006454 W JP2021006454 W JP 2021006454W WO 2022176172 A1 WO2022176172 A1 WO 2022176172A1
Authority
WO
WIPO (PCT)
Prior art keywords
nodes
switch
node
bandwidth
network
Prior art date
Application number
PCT/JP2021/006454
Other languages
English (en)
French (fr)
Inventor
イブラヒム サラ
俊和 橋本
Original Assignee
日本電信電話株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電信電話株式会社 filed Critical 日本電信電話株式会社
Priority to PCT/JP2021/006454 priority Critical patent/WO2022176172A1/ja
Priority to US18/262,046 priority patent/US20240089641A1/en
Priority to JP2023500471A priority patent/JPWO2022176172A1/ja
Publication of WO2022176172A1 publication Critical patent/WO2022176172A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J14/00Optical multiplex systems
    • H04J14/02Wavelength-division multiplex systems
    • H04J14/0278WDM optical network architectures
    • H04J14/02862WDM data centre network [DCN] architectures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q11/00Selecting arrangements for multiplex systems
    • H04Q11/04Selecting arrangements for multiplex systems for time-division multiplexing
    • H04Q11/08Time only switching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/27Arrangements for networking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q11/00Selecting arrangements for multiplex systems
    • H04Q11/0001Selecting arrangements for multiplex systems using optical switching
    • H04Q11/0005Switch and router aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q11/00Selecting arrangements for multiplex systems
    • H04Q11/04Selecting arrangements for multiplex systems for time-division multiplexing
    • H04Q11/0428Integrated services digital network, i.e. systems for transmission of different types of digitised signals, e.g. speech, data, telecentral, television signals
    • H04Q11/0435Details
    • H04Q11/0442Exchange access circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q11/00Selecting arrangements for multiplex systems
    • H04Q11/0001Selecting arrangements for multiplex systems using optical switching
    • H04Q11/0005Switch and router aspects
    • H04Q2011/0007Construction
    • H04Q2011/0033Construction using time division switching

Definitions

  • the present invention relates to optical networks, optical nodes and optical transmission systems used therein.
  • a data center is a general term for facilities that specialize in the installation and operation of computers (mainframes, minicomputers, servers, etc.) and data communication equipment.
  • Data center (DC) networks have grown rapidly to provide a wide range of services while accommodating a significant increase in traffic volume. Despite this significant increase in traffic volume, the basic structure of networks has not changed significantly.
  • FIG. 1 is a diagram showing the configuration of a conventional DC network.
  • a typical DC network consists of multiple layers, for example, it has a three-layer DC network configuration as shown in FIG.
  • a three-layer DC network 100 includes a switch 101, an optical link 102, a switch 103, an optical link 104, a ToR (TopOfRack) switch 105, and a server 106 from the upper layer side.
  • the switches 101 and 103 are each composed of upper and lower electrical switches and optical links 107 and 108 connecting them. Therefore, the DC network of FIG. 1 would have 8 hops between the two ToRs.
  • Optical-Electrical-Optical (OEO) conversion is performed at a large extent in each electrical switch.
  • data is transmitted as optical signals on links connecting network nodes consisting of one or more servers.
  • the optical signal is converted into an electrical signal and switched by an electrical switch, ie, an ASIC (Application Specific Integrated Circuit) switch.
  • ASIC Application Specific Integrated Circuit
  • the switching capacity of ASIC switches continues to increase significantly and is now reported with a capacity of 12.8 Tb/s.
  • CMOS Complementary Metal Oxide Semiconductor
  • a more pressing problem is the requirement for very high data rates for optical signals entering and exiting ASIC switches.
  • co-packaged implementations of transceivers and ASIC switches have received increasing attention in recent years as an alternative to traditional pluggable transceivers.
  • significant power consumption and heat generation problems remain.
  • the present invention has been made in view of such problems, and its purpose is to propose a new DC network structure that addresses various limitations of ASIC switches.
  • one embodiment is an optical core section having a full mesh network configuration, and a plurality of nodes connected to the optical core section, which are divided into a plurality of groups. , a plurality of nodes including up to m nodes in a group, each of said plurality of nodes receiving optical signals from said at most m nodes; and routing to a plurality of servers, the ASIC switch having a switching capacity corresponding to the average incoming traffic of the plurality of nodes, the receiving cycle comprising a plurality of time slots.
  • idle time slots addressed by any node in said group to which said source node belongs and following said plurality of time slots, only in time slots associated with the group to which said source node belongs, for a period of time; It is characterized by not receiving optical signals from any of said source nodes and processing traffic in excess of said average incoming traffic.
  • An optical network of another embodiment includes an optical core section having a full mesh network configuration, and a plurality of nodes connected to the optical core section, divided into a plurality of groups, and a maximum of and a plurality of nodes, including m nodes, each of said plurality of nodes being associated with a group to which a source node belongs during a receive cycle including a plurality of time slots. switching and routing electrical signals corresponding to optical signals received from the up to m nodes addressed by any node in the group to which the source node belongs, only in the time slots selected by the source node, and routed to a plurality of servers.
  • An ASIC switch a main switch having a switching capacity corresponding to the average incoming traffic of the plurality of nodes and operating synchronously with the time slots, and a switching capacity capable of processing traffic exceeding the average incoming traffic. and an auxiliary switch that operates regardless of the time slot.
  • optical network described above also has aspects as an invention of network nodes within the optical network.
  • the optical network of the present disclosure simplifies the node configuration and reduces the capacity and power consumption of ASIC switches. It also supports large-scale optical networks and low power consumption.
  • FIG. 1 illustrates a basic configuration of a DC network according to the present disclosure
  • FIG. 1 is a diagram illustrating a problem of a node in a conventional optical network periphery
  • FIG. 1 is a diagram conceptually showing the configuration of an optical network and a receiving node of the present disclosure
  • FIG. 4 is a diagram illustrating the effect of reducing receivers obtained in the optical network of the present disclosure
  • FIG. 2 is a diagram for explaining data reception operation in a receiving node of an optical network
  • FIG. 10 is a diagram showing another example of the receiving operation of networks with different group configurations
  • 1 illustrates exemplary network and node specifications according to this disclosure
  • FIG. 3 illustrates different concepts of receive bandwidth required at a receiving node
  • FIG. 4 is a diagram for explaining possible combinations of a plurality of nodes with different average numbers of connections
  • FIG. 4 is a diagram for explaining effective BW degradation between node pairs due to network division
  • Fig. 3 illustrates different bandwidths of traffic in a DC network
  • FIG. 2 illustrates the reduced bandwidth concept of a receiving ASIC switch
  • FIG. 10 is a diagram showing the relationship between average bandwidth BW switch_avg and reception cycle period T
  • FIG. 10 is a diagram illustrating an extended reception cycle period associated with the introduction of factor F
  • FIG. 4 is a block diagram of a node including modified switches with the introduction of factor F
  • Fig. 2 is a block diagram of a node that mitigates delay in a modified switch;
  • the following disclosure includes a DC network architecture that achieves end-to-end optical transmission between desired node pairs with optical switching at the core and electrical switching only at the network perimeter.
  • the inventors have proposed a DC network structure that more efficiently utilizes electrical switches facing performance limitations.
  • BW capacity
  • FIG. 2 is a diagram showing the basic configuration of a DC network according to the present disclosure.
  • the DC network 1 includes a flat optical network 2 that is the core part of the entire network, and a SW unit 3, ToR 4, and server 5 that are the peripheral parts of the entire network. These peripheral elements form part of the node.
  • Two nodes are shown in FIG. 2, with one node including four ToRs for simplicity, but it should be understood that many other nodes are located around the flat optical network 2 .
  • optical switching is used in the flat optical network 2, which is the core portion, and electrical switching is used only in the SW portion 3, which is the peripheral portion, and its peripheral side.
  • the optical network structure of FIG. 2 is scalable and supports highly dynamic connections between arbitrary pairs of nodes.
  • the core part of the network can be implemented as a physical full-mesh network or as a full-mesh-like network.
  • the full-mesh network or full-mesh-like network premised in the DC network of the present disclosure shown in FIG. are different.
  • only optical switching is used without performing OEO conversion in the SWs 101 and 103 of each hierarchy of FIG.
  • the following disclosure reveals a novel and practical data reception mechanism and its associated hardware at each node. They replace some of the previously required numerous optical receiver units and complex bulk switching arrangements.
  • the basic approach of configuring the optical network of the present disclosure is to introduce a small time-domain constraint on transmissions from network nodes to the same destination node.
  • the network of the present disclosure operates according to a timeslot scheme [Problem of reception in optical network periphery] When realizing a physical full-mesh connection in the conventional N-node DC network shown in FIG. Requires enormous resources. Such full-mesh or full-mesh-like networks require extensive switching fabric at each node.
  • any destination node in the network can be addressed simultaneously by any number of source nodes, up to N-1.
  • "addressing" is not limited to specifying and designating the destination node of the other party as a communication destination by a source node in order to set up a communication link between nodes, but also actually setting up a communication link, It shall also include conducting communications.
  • FIG. 3 is a diagram for explaining problems in conventional optical network peripheral nodes.
  • FIG. 3 conceptually shows a full-mesh optical network 140, representing the flat optical network 1 shown in FIG. 2 as a set of nodes.
  • the optical network 140 has many interconnected nodes.
  • FIG. 3 depicts four adjacent nodes interconnected to one node, this symbolically indicates that all nodes in the optical network are connected. there is
  • the receiving node 141 has an interface section 144 with the optical network side and is further connected to the ToR 145 .
  • the interface section 144 comprises a receiver 143 for receiving multiple optical signals 142 arriving simultaneously. If the optical network 140 consists of N nodes, then the receiving node 141 would require a number of ports and corresponding (N-1) receivers 143 to handle all simultaneously incoming data communications. Become. Further, the interface unit 144 has a large-scale receiving ASIC switch (not shown). As mentioned earlier, very high data rates are required for optical signals entering and exiting ASIC switches. Also from FIG. 3, it can be understood that a large number of receivers and large-scale ASIC switches are required at all receiving nodes.
  • the optical network of the present disclosure proposes to introduce a slight time-domain restriction on data transmission from a network node to the same destination node.
  • FIG. 4 is a diagram conceptually illustrating the basic configuration of the optical network and receiving nodes of the present disclosure. Similar to FIG. 3, FIG. 4 conceptually illustrates a full-mesh or full-mesh-like optical network 10.
  • the optical network 10 consists of N (eg, 36) nodes, and as an example consider data transmission between a source node or source node 11 and a destination node or receiving node 13 .
  • N eg, 36
  • the source node can also be the receiving node, and the names are simply distinguished according to the operations and functions to be described. Therefore, it should be noted that the source node also has the functions and configurations described for the receiving node.
  • N network nodes that are source nodes are divided into a large number of groups (d), and groups to which each source node belongs are defined.
  • groups to which each source node belongs are defined.
  • six groups, a first group (G1) to a sixth group (G6), are defined, and the source node 11 belongs to the first group 12.
  • Reception of data communication at any node is performed separately in time slots of fixed duration T for each group to which the source node belongs, as will be described later. That is, a receiving node can be addressed by any source node belonging to a group of source nodes only during the time slots assigned to that group. Specifically, the receiving node 13 receives data from the source node 11 during the time slot assigned to G1 to which the source node 11 belongs. It is also addressed during the same timeslot by the other five source nodes belonging to G1.
  • the nodes belonging to one group in FIG. 4 are shown here as being close together for the sake of explanation, but they are generally spatially distributed throughout the network.
  • a receiving node sequentially receives data from different groups for each time slot, and the cycle time for completing reception from all groups is d (number of divisions) ⁇ T (TS time).
  • d number of divisions
  • T TS time
  • B out be the maximum transmission bandwidth (BW) of each node.
  • BW transmission bandwidth
  • bandwidth means the transmission bandwidth that can be received or transmitted by a node, and may be understood as transmission speed (transmission rate). It should be noted that the term “bandwidth” is a broad concept meaning the capacity of communication resources for data transmission determined according to the modulation scheme and signal configuration of optical communication.
  • the bandwidth that can be sent from a node and the bandwidth that can be received at a node are the same, and the maximum outgoing bandwidth, B_out , is also the maximum incoming bandwidth.
  • the effective BW which is the effective bandwidth between two nodes, is B out /d.
  • increasing the number d of node groups in the network will decrease the effective BW between any pair of nodes.
  • a new mechanism for increasing the value of this effective BW is described below as it addresses the performance limitations of electrical switches in the optical network and receiving nodes of the present disclosure of FIG.
  • the nodes in the optical network of the present disclosure of FIG. Compared to nodes, the number of receivers can be greatly reduced.
  • an arrayed waveguide grating (AWG: Arrayed Waveguide Grating) 14 has been added.
  • Each of the AWGs 14 has at least d groups of input ports so that data from N nodes can be received simultaneously, and the front part of the node 13 is provided with AWGs of m nodes in one group. .
  • the received data multiplexed through the m AWGs 14 is supplied to the interface section 15 similar to the conventional technology and input to the receiver 16 .
  • the number of receivers 16 in the interface section 15 is significantly reduced to 1/m compared to the prior art configuration of FIG.
  • FIG. 5 is a diagram showing the effect of reducing receivers obtained by dividing the nodes in the optical network of the present disclosure into groups.
  • the relationship between the number of receivers (Rx units) in a node and the number of all nodes is shown using the number of divisions, that is, the number of groups, as a parameter.
  • (b) shows linear representation. Regardless of the number of nodes, the number of required receivers can be greatly reduced as the number of divisions increases.
  • the optical network of the present disclosure includes an optical core section 2 having a full-mesh network configuration, and a plurality of nodes connected to the optical core section, divided into a plurality of groups. a plurality of nodes, each of which includes m nodes, each of said plurality of nodes 13 being in the group to which said source node belongs only in the time slots associated with the group to which said source node belongs; It can be implemented as being addressed by any node. Further, each of the plurality of nodes is m arrayed waveguide gratings (AWG) 14, and the plurality of input ports of the AWG are the corresponding optical signals from the maximum m nodes belonging to the same group.
  • AWG arrayed waveguide gratings
  • the wavelengths used by one or more source nodes among the maximum m nodes are set to match the operating wavelengths of the plurality of input ports, and an output combination of the AWG. It can be implemented as having m receivers 16 connected to wave ports and an ASIC switch 17 for switching and routing electrical signals from the m receivers to a plurality of servers 18 .
  • a node connected to an optical core section having a full mesh network configuration the node is divided into a plurality of groups together with a plurality of other nodes connected to the core section, and within one group contains up to m nodes, each of said up to m nodes being addressed by any node in said group to which said source node belongs only in the time slot associated with the group to which said source node belongs.
  • a node connected to an optical core section having a full mesh network configuration the node is divided into a plurality of groups together with a plurality of other nodes connected to the core section, and within one group contains up to m nodes, each of said up to m nodes being addressed by any node in said group to which said source node belongs only in the time slot associated with the group to which said source node belongs.
  • the interface section 15 of the receiving node 13 has a receiving ASIC switch 17 as in the configuration of the prior art.
  • the configuration of the interface section at the receiving node is greatly simplified compared to the prior art in terms of the number of receivers and the capacity of the receiving ASIC switch. Further details of the operation of the receiving node and reducing the bandwidth of the receiving ASIC switch are provided.
  • B. Simplification of reception switching Using the maximum transmission bandwidth of one node as described above, B out , and the number of nodes in one group, m, the maximum BW that a node in the basic configuration of FIG.
  • FIG. 6 is a diagram for explaining the data receiving operation of the receiving node of the basic configuration in the optical network of the present disclosure.
  • FIG. 6(a) shows a time slot configuration
  • FIG. 6(b) is a diagram for explaining the switching operation when data is being received in TS1.
  • the ASIC switch 17 of the interface unit 15 of (b) has m ports on the input side facing the network and the number of ports corresponding to the number of the ToR switches 18 on the other output side. . If multiple links are used for each ToR switch, there are ports corresponding to the multiple links.
  • the time slot structure of FIG. 6(a) shows an example of dividing all the nodes of the optical network 10 shown in FIG. 4 into six groups. Receives only in slots. For example, data from 6 source nodes belonging to the first group are received at the corresponding ports of each AWG only in TS1 as shown in (b). Data from m different source nodes are received in m AWGs 14-1 to 14-6, the same number as the number of nodes in one group. Thus, in a particular time slot, each of the m input ports of ASIC switch 17 can capture data received from different source nodes within the same group. That is, data can be received simultaneously from all m source nodes in the same group.
  • an AWG is connected to each port on the input side of the ASIC switch 17, and nodes of the same group are connected to separate AWGs. It is connected. During the assigned time slot, only nodes in the permitted group are active while all nodes in other groups do not transmit to the destination node.
  • the same wavelength ⁇ 1 is used by all nodes of a group (eg, G1) active in TS1.
  • An input signal of wavelength ⁇ 1 will be passively routed towards the ASIC switch 17 by multiple (m) AWGs. That is, routing is performed by connecting different nodes within the same group to the ports of the corresponding wavelengths of the m AWGs.
  • G2 next active group
  • the ⁇ 2 input signal from each node belonging to G2 is passively routed towards the ASIC switch 17 by multiple (m) AWGs.
  • nodes in the same group do not need to transmit on the same wavelength.
  • Multiple wavelengths used by different groups of nodes connected to the same AWG may be coordinated to different wavelengths so as not to cause conflicts.
  • the receiving nodes can share the AWG configuration.
  • FIG. 7 is a diagram showing another operation example of reception switching in networks with different group configurations.
  • the number of groups (divided number) d 16
  • node numbers (1 to 512) are shown at the inputs of the AWG.
  • 32 nodes in the same group are shown using the same wavelength, but the wavelength may be different for each AWG.
  • FIG. 8 illustrates exemplary network and node specifications according to this disclosure.
  • An example of parameters for a configuration with a network divided into 16 and corresponding 16 timeslots is shown.
  • one time slot has a length of 40 ns, which is 30 ns corresponding to a 400 Gb/s packet and a margin of 10 ns.
  • One cycle is divided into 16 time slots and the 512 network nodes are divided into 16 groups. The number of nodes in one group is 32.
  • the destination (receiving) node for each timeslot is only addressed by the authorized group.
  • the same source node can address the same destination node every 16 timeslots.
  • C. Reduction of BW of Receiving ASIC Switch As mentioned in the explanation of FIG.
  • the node of the basic configuration in the optical network of the present disclosure is configured to greatly reduce the capacity of the receiving ASIC switch compared to the conventional technology.
  • the receiving ASIC switch capacity is set to a value that matches or slightly exceeds the average incoming traffic.
  • a memory associated with the receiving ASIC switch is provided to handle traffic in excess of this switching capacity with some delay.
  • FIGS. 9 and 10 it will be described below that the basic node of the flat optical network of the present disclosure can handle substantially sufficient traffic even with reduced receiving ASIC switch capacity compared to prior art nodes. do.
  • the inventors classify the traffic input to the receiving node, in other words, the input bandwidth BW of the receiving node, into two categories with different requirements. did.
  • Two categories of traffic are: (a) traffic that needs to be switched in real-time without additional delay; All traffic that does not need to be switched. Assume that the average received BW is assigned to the traffic of (a), and the maximum received BW is assigned to the traffic of (b).
  • the switching capacity of the receiving ASIC switch ie the transmission bandwidth of the receiving ASIC switch, can be allocated to different BWs corresponding to the two categories of traffic.
  • introducing a storage medium (memory) for partial storage of received data at the receiving node avoids the need for received data to be lost or retransmitted. Guaranteed not to.
  • the main advantage of introducing a storage medium is that the switching capacity of the receiving ASIC switch can be reduced at the expense of introducing extra delay.
  • FIG. 9 is a diagram illustrating different concepts of reception bandwidth required at a receiving node.
  • FIG. 9 is a diagram illustrating different concepts of reception bandwidth required at a receiving node.
  • 9(b) is a diagram for explaining the two reception bandwidths mentioned above.
  • the reception ASIC switch in the interface unit is equipped with a memory to provide an average reception BW for 8 nodes, which means that real-time switching processing for 8 nodes is sufficient.
  • the average received BW can vary from node to node, but except for a limited number of specific nodes, the average received BW can usually be set significantly lower than the maximum received BW. This is due to the natural balance of traffic in the flat optical network 2 assumed in the DC network of the present disclosure shown in FIG. This balancing mechanism can be explained as follows for the nature of traffic in flat optical networks.
  • FIG. 10 is a diagram explaining possible combinations of multiple nodes with different average numbers of connections.
  • the properties of traffic that are prerequisites for the flat optical network will be described.
  • the average number of incoming connections per node is 1. From this state, the average number of connections received begins to deviate from 1 as the node receives more connections on average. In flat optical networks this means that traffic that was being received by one node is directed to the new busy node. As more nodes become busy, the average number of connections on the remaining nodes naturally decreases.
  • the value of the average number of connections Q of busy nodes of category (a) is used as a parameter, and the node ratio (horizontal axis) of category (b) that satisfies the condition of 100% traffic load and the ratio (horizontal axis) of category (a). This indicates the relationship with the node ratio (vertical axis).
  • the receiving node of the basic configuration in the optical network of the present disclosure includes multiple AWGs 14 and interface units 15 that passively route received data from different source nodes.
  • a receiver and a reception ASIC switch 17 are provided on the front of the interface section 15 , and a storage means (memory) 19 interlocking with the reception ASIC switch 17 is provided.
  • the capacity of the receiving ASIC switch 17 should match or slightly exceed the average received traffic, and the storage means 19 can be used to handle traffic exceeding this switching capacity with a small delay. .
  • the optical network of the basic configuration of the present disclosure operates in a time-slotted manner for transmission from a source node to the same destination node in order to limit data reception at the receiving node.
  • the source node must wait until one full receive cycle has passed before it can again address the same destination node. Restrictions on data reception will result in a lower effective transmission rate, degrading the effective BW of data transmission between node pairs.
  • FIG. 11 is a diagram for explaining degradation of effective BW between arbitrary node pairs due to network division.
  • the horizontal axis indicates the network division number (group number) d
  • the vertical axis indicates the reception BW normalized by Bout of the maximum transmission BW at the reception node.
  • the reception BW decreases as the network division number d increases. For example, when the division number d increases from 8 to 32, the reception BW decreases from 12.5% to 3.12%.
  • a mechanism is needed to compensate for this reduction in effective BW between node pairs caused by network partitioning.
  • the inventors have proposed two solutions: modifying the operation of the source node and modifying the transmission path between arbitrary nodes.
  • One solution is to allow the source node to reach the desired destination node in one or more time slots, and another solution is to set up another optical link between any pair of nodes. and increased the effective BW.
  • this specification proposes to modify the configuration of the time slots or the configuration of the electrical switches at the receiving nodes in the optical network with the basic configuration described above. do. From a new perspective different from the previous solutions, we propose a method to deal with performance limitations in ASIC switches. [Introduction of factor F for maximum incoming bandwidth BW in_max of receiving node]
  • bandwidth BW switch_avg of the receiving ASIC switch in the network node is a fraction F of the maximum receiving bandwidth BW in_max (0 ⁇ F ⁇ 1), if maximum traffic handling can be maintained with some compromise. It is possible to In order to cope with rapidly increasing traffic volumes and the limitations of switching technology as first mentioned, it will be necessary to reduce the switching capacity (bandwidth) in ASIC switches to a realistically available value. First, different concepts of bandwidth in each part of the DC network of the basic configuration shown in FIG. 4 will be explained.
  • FIG. 12 is a diagram illustrating different bandwidths of traffic in the DC network.
  • FIG. 12 shows the same basic configuration of the DC network of the present disclosure as shown in FIG. Here we present various definitions of bandwidth from different perspectives in relation to network nodes.
  • BW out Total output bandwidth from each node
  • BW in_max Maximum incoming bandwidth of each node (to receiving switch)
  • the DC network of the present disclosure may comprise storage means 19 associated with the receiving ASIC switch 17, as already explained in FIGS.
  • the average bandwidth BW switch_avg for the receiving ASIC switch is represented by arrow 25 .
  • the inventors believe that it is difficult to flexibly cope with a sudden increase in traffic and the restrictive situation of ASIC technology progress by allocating the maximum available bandwidth to the receiving ASIC switch at any given time.
  • the receiving switch bandwidth BW switch_avg preconfigured to match or slightly exceed the average received traffic, but also a fraction F of the maximum receiving bandwidth BW in_max (Fraction: 0 ⁇ F ⁇ 1)
  • F the maximum receiving bandwidth BW in_max
  • BW switch_avg Reduced bandwidth of the main ASIC switch at the node (Definition 5)
  • Factor F Ratio of the reduced bandwidth BW switch_avg to the ASIC switch to the maximum incoming bandwidth BW in_max to the node Above From the definition of "reduced bandwidth" in (5), the following equation is obtained.
  • BW switch_avg F x BW in_max formula (2)
  • the ASIC switch has difficulty meeting the bandwidth required for the maximum received bandwidth BW in_max , it is reasonable to introduce a “reduced bandwidth” It can also be said.
  • By introducing the factor F it is possible to flexibly cope with the bandwidth of the ASIC switch that is practically available.
  • the total bandwidth of the network BW network can be increased by the same factor of F.
  • limiting the bandwidth of the receiving ASIC switch generally allows the power consumption of the node to be reduced. Introducing a factor F in the bandwidth of the receiving ASIC switch in this manner is beneficial for network scalability.
  • FIG. 13 is a diagram illustrating the concept of reduced bandwidth of ASIC switches in the DC network of this embodiment.
  • FIG. 13(a) simply shows the relationship between the average bandwidth BW switch_avg and the maximum incoming bandwidth BW in_max at the receiving node.
  • the average bandwidth BW switch_avg 25 of the receiving ASIC switch 17 is set to a fraction of the maximum incoming bandwidth BW in_max 24 to the node, and the maximum incoming bandwidth BW in_max 24 is is bisected.
  • the factor F represents the ratio between the maximum incoming bandwidth BW in_max 24 and the average bandwidth BW switch_avg 25 allocated to the ASIC switch and is in the range 0 ⁇ F ⁇ 1.
  • the reception cycle in which reception from all node groups is completed is T, and the maximum incoming bandwidth BW in_max of each node is expressed by the following equation from the configuration of the reception cycle T having a time slot structure corresponding to d groups. be able to.
  • the reception cycle period T has the following relationship with the number of groups d.
  • T t TS ⁇ BW network /BW in_max formula (5)
  • T ⁇ BW switch_avg t TS ⁇ F ⁇ BW network formula (6)
  • the relationship between the average bandwidth BW switch_avg for the ASIC switch and the total bandwidth BW network of the network in equation (6) via the factor F describes the scalability of the aforementioned network.
  • the product of the coefficient F and the BW network (right hand side) is fixed for the receive cycle period T and the given value of BW switch_avg (left hand side).
  • the relationship of equation (6) can be maintained by increasing or decreasing the coefficient F corresponding to this fluctuation.
  • the coefficient F by varying the set value of the coefficient F, the configuration of the same reception cycle period T and average bandwidth BW switch_avg of the reception switch can be maintained.
  • FIG. 14 is a diagram showing the relationship between the average bandwidth BW switch_avg of the receiving ASIC switch and the receiving cycle period T.
  • the horizontal axis is the average bandwidth BW switch_avg (Tbps) of the receiving switch
  • the vertical axis is the receiving cycle period T (nsec)
  • the total network bandwidth BW network is used as a parameter.
  • the relationship between is calculated and shown.
  • 6 curves are shown with a total output bandwidth BW out per node of 400 Gbps, a time slot time t TS of 40 ns, and a total network bandwidth BW network of 51.2 Tbps to 1.64 Pbps as parameters.
  • the plot on the left side corresponds to the current level of ASIC technology
  • the plot on the right side corresponds to the level of ASIC technology expected in the future. It can be seen that the reception cycle period T increases as the total network bandwidth BW network increases.
  • the receive cycle period T is preferably shorter because it is the period until the next data is received in the DC network timeslot scheme of the present disclosure.
  • the graph of FIG. 14 shows the scalable relationship between the ASIC switch average bandwidth BW switch_avg and the network total bandwidth BW network by introducing the factor F in equation (6), including the set value of the reception cycle period T. showing.
  • FIG. 13(b) illustrates two concepts of how to handle above-average input traffic in an ASIC switch bandwidth limited by a factor of F.
  • FIG. 13(b) shows the configuration of the extended reception cycle period, which adds an idling time slot 26 that does not receive data from the node to the reception cycle period T on the time axis. .
  • This idle time slot 26 allows the receiving ASIC switch to switch for an additional portion of the input traffic beyond the temporarily reserved average (average bandwidth BW switch_avg ).
  • This idle time slot does not actually receive data from any node, is not addressed, and remains unassigned.
  • FIG. 15 is a diagram explaining the configuration of the extended reception cycle period accompanying the introduction of the factor F.
  • the timeslot structure 31 for the extended receive cycle is shown.
  • the normal time slot structure 30 consists of 16 time slots (TS1 to TS16), one of the 16 groups corresponding to each time slot.
  • the reception cycle period T33 is TS time*number of groups (16).
  • the extended receive cycle period T EXTEND 35 comprises an idle time 34 following the receive cycle period T33.
  • idle time 34 it is neither addressed nor receives data from any network group. Additional (excess) traffic that could not be processed due to above-average input traffic in each time slot can be processed by the receiving ASIC switch during idle time 34 .
  • the time in the extended receive cycle period T EXTEND 35 divides the switching process by the ASIC switch into two. One is a process performed within the range of the average bandwidth BW switch_avg for each node group with a time limit during the normal reception cycle period T33. The other is processing that is performed during idle time 34 without time restrictions depending on the node group to which it belongs. This solution does not require any changes in the configuration of the receiving node and the storage means 19 shown in FIG.
  • the optical network of the present disclosure includes an optical core section having a full mesh network configuration, and a plurality of nodes connected to the optical core section, divided into a plurality of groups, and a maximum of m nodes in one group. nodes, each of said plurality of nodes switching electrical signals corresponding to optical signals received from said at most m nodes. , an ASIC switch routing to a plurality of servers, the ASIC switch having a switching capacity corresponding to the average incoming traffic of the plurality of nodes, the group to which the source node belongs during a receive cycle period comprising a plurality of time slots.
  • any node in the group to which the source node belongs only in the time slots 33 associated with and in one or more idle time slots 34 following the plurality of time slots from any of the source nodes It can also be implemented as not receiving optical signals and handling traffic in excess of said average incoming traffic.
  • BW i be the input bandwidth in each time slot of one receive cycle period T, where i is the time slot index.
  • the amount of traffic arriving at the ASIC switch varies from time slot to time slot and the difference between BW i and the average bandwidth BW switch_avg is denoted ⁇ BW i .
  • the maximum additional traffic that the receiving ASIC switch can handle is limited by the following equation. The following equation averages additional traffic over one receive cycle period T.
  • FIG. 13(b) shows the concept of yet another second solution for handling above-average incoming traffic with an ASIC switch bandwidth limited by a factor F.
  • the main An auxiliary switch 27 is provided in addition to the ASIC switch. It is not the time-based approach as in the first solution, but the approach of having main and auxiliary switches 27 with different functions and modifying the switching behavior.
  • the main switch may be a high speed switch with state of the art performance at the time, while the auxiliary switch 27 may utilize a lower speed switch with less bandwidth than the main switch, as will be described below.
  • FIG. 16 is a diagram for explaining the configuration of an ASIC switch modified with the introduction of the coefficient F.
  • FIG. FIG. 16 shows a receiving node 40 with ASIC switches in a modified configuration, identical to the receiving node configuration in the basic configuration of the DC network according to the present disclosure shown in FIGS. That is, the AWG 43 of m nodes in one group are provided in the front part of the node, and the corresponding receivers 44 are provided.
  • the node 40 has an auxiliary switch 42 in addition to the main switch 41 .
  • the main switch 41 like the receiving node in the basic configuration of FIGS. 4 and 9, is a high speed, wideband ASIC switch responsible for processing the average bandwidth BW switch_avg scaled by a factor F.
  • Auxiliary switch 42 is a low speed switch with a narrow bandwidth set to 1/q with respect to the bandwidth of main switch 41 .
  • the main switch 41 operates under time restrictions according to the time slot method described in FIGS. can.
  • the main switch 41 and the auxiliary switch 42 are controlled by a node controller not shown in FIG. 16, and two switches with different bandwidths work together.
  • the optical network of the present disclosure includes an optical core section having a full mesh network configuration, and a plurality of nodes connected to the optical core section, divided into a plurality of groups, and a maximum of m nodes in one group. nodes, each of said plurality of nodes being associated with a group to which a source node belongs during a receive cycle period comprising a plurality of time slots An ASIC for switching and routing electrical signals corresponding to optical signals received from said up to m nodes addressed by any node in said group to which said source node belongs, only in time slots, to a plurality of servers.
  • a main switch 41 which has a switching capacity corresponding to the average incoming traffic of the plurality of nodes and operates in synchronization with the time slots, and a switching capacity capable of processing traffic exceeding the average incoming traffic. and has an auxiliary switch 42 that operates independently of the time slot.
  • the maximum additional traffic that can be handled by the auxiliary switch is determined as follows. Let the input bandwidth in each time slot of one receive cycle period T be BW i . The traffic arriving at the ASIC switch varies from time slot to time slot and the difference between BW i and the average bandwidth BW switch_avg is denoted ⁇ BW i . Let d be the number of time slots in the receiving cycle period T (the number of time slots d also corresponds to the number of groups of nodes). The maximum additional traffic through the ASIC switch in the modified configuration of FIG.
  • the causes of latency (delay) encountered by traffic passing through the path of the auxiliary switch can be divided into two.
  • the first is latency due to long physical switching times due to the narrow bandwidth of auxiliary switch 42 .
  • a second cause is latency due to extra latency due to queuing until the transmission to the top-of-rack (ToR) switch 45 is complete.
  • further modifications to the second solution of FIG. 16 are proposed to address these delays due to the auxiliary switch 42 .
  • FIG. 17 is a block diagram of a node that mitigates the delay of a modified ASIC switch. Since the receiving node 50 having the modified ASIC switch of FIG. 17 has substantially the same configuration as the receiving node 40 described with reference to FIG. 16, only differences will be described.
  • the queue 55 in the auxiliary switch 52 is also included in the receiving node 40 of FIG. 16, and corresponds to the queue in the delay of the second reason mentioned above.
  • the auxiliary switch 52 and the ToR switch 57 are connected via a link 56 with a large transmission capacity that can be realized as an optical link.
  • the configuration of FIG. 17 can support sufficient capacity to transmit the accumulated data in one time slot to the destination ToR switch, reducing delay in the modified ASIC switch.
  • the optical network of the present disclosure can simplify the configuration of nodes in the periphery of the DC network and reduce power consumption. It solves or at least alleviates the problems of ASIC switches, and can cope with the large-scale and low power consumption of optical networks. In addition, it realizes scalability that flexibly adapts to network traffic demands and technological progress of realistic ASIC switches in response to various limitations of ASIC switches.
  • the present invention can be generally used in optical communication systems.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Optical Communication System (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

ASICスイッチの様々な限界を対処する新しいDCネットワーク構造を提案する。本開示の光ネットワークでは、ネットワークノードから同じ宛先ノードへの伝送に対して、わずかな時間領域の制限が導入される。データ送受信は、タイムスロット方式によって動作する。ASICスイッチにおけるスイッチング帯域幅は複数のノードの平均着信トラフィックに対応する帯域幅を有し、この帯域幅を超えるトラフィックを記憶して処理する記憶媒体を備える。受信ASICスイッチに対する平均帯域幅を、ノードへの最大着信帯域幅が係数Fによって縮小された帯域幅に設定することもできる。受信ASICスイッチの帯域幅を制限することで、ノードの消費電力を減らすことも可能となり、ネットワークのスケーラビリティのために有益である。

Description

タイムスロット化した受信を使用する光ネットワークおよびノード
 本発明は、光ネットワーク、そこに使用される光ノードおよび光伝送方式に関する。
 データセンターとは、コンピューター(メインフレーム、ミニコンピューター、サーバー等)やデータ通信装置等を設置・運用することに特化した施設の総称である。データセンター(DC)ネットワークは、トラフィック量の大幅な増加に対応しながら、広範囲のサービスを提供するために急速に成長してきた。このようなトラフィック量の大幅増加にもかかわらず、ネットワークの基本構造は大きく変化していない。
 図1は、従来技術のDCネットワークの構成を示す図である。典型的なDCネットワークは複数のレイヤから構成され、例えば図1に示すように3層DCネットワークの構成を持つ。3層DCネットワーク100は、上位層側から、スイッチ101、光リンク102、スイッチ103、光リンク104、ToR(TopOfRack)スイッチ105、サーバー106を備えている。スイッチ101、103は、それぞれ上下の電気スイッチとそれらを接続する光リンク107、108から成っている。したがって図1のDCネットワークでは、2つのToR間で8ホップを有していることになる。各電気スイッチの広い範囲で、光-電気-光(OEO:Optical-Electrical-Optical)変換が実施される。
 このようなDCネットワーク100では、1以上のサーバーからなるネットワークノードを接続するリンクにおいて、データは光信号として伝送される。各ノードにおいて、光信号は電気信号に変換され、電気スイッチすなわちASIC(Application Specific Integrated Circuit)スイッチによりスイッチングされる。ASICスイッチのスイッチング容量は大幅に増加し続けており、現在では12.8 Tb/sの容量を持つものも報告されている。
White Rabbit project webpage, インターネット<URL: https://www.ohwr.org/project/white-rabbit/wikis/home > K. Clark et al., "Sub-Nanosecond Clock and Data Recovery in an Optically-Switched Data Centre Network,"2018年, post-deadline paper in ECOC 2018, Italy
 しかしながら、ASICスイッチのスイッチング容量の拡大はいずれ限界に達すると考えられる。ASICスイッチの構成単位であるCMOS(Complementary Metal Oxide Semiconductor)トランジスタのサイズをさらに縮小することがますます困難になっているからである。CMOSトランジスタをより小さくするためのポスト平面CMOS製造プロセスが求められていが、このようなプロセスは技術的に難しく、非常にコストが掛かる。
 より差し迫った問題は、ASICスイッチに入出力する光信号に対する、非常に高いデータレートの要請である。高いデータレートに対応するため、従来のプラガブルなトランシーバに代わり、トランシーバおよびASICスイッチのコパッケージ実装が近年注目を浴びている。しかしながらこのような先進的なアプローチを採用しても、大きな消費電力および発熱の問題が残っている。
 SAICスイッチによる発熱量は、従来の空冷方式の限界をすでに超えており、ASICスイッチの放熱を扱うには水冷方式が必要となる。水冷方式は、ASICスイッチに対してある程度の電力消費マージンを提供できるが、長期的なソリューションではない。このようにASICスイッチにおける光信号のデータ速度の大幅増加に直面したことで、空間密度および電力制限の問題は、深刻な障害になっている。
 上述のようなすべての問題の根本的な解決法は、ASICスイッチにとって不可避な光‐電気‐光(OEO)変換を回避するか、その頻度を減らすことである。そのため、DCネットワーク構造に光スイッチングを導入することが必要となる。
 本発明はこのような問題に鑑みてなされたものであって、その目的とするところは、ASICスイッチの様々な限界を対処する新しいDCネットワーク構造の提案にある。
 このような目的を達成するために、1つの実施態様は、フルメッシュネットワーク構成を有する光コア部と、前記光コア部に接続された複数のノードであって、複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれている、複数のノードとを備えた光ネットワークであって、前記複数のノードの各々は、前記最大m個のノードから受信された光信号に対応する電気信号をスイッチングし、複数のサーバーへルーティングするASICスイッチであって、前記複数のノードの平均着信トラフィックに対応するスイッチング容量を有するASICスイッチを有し、複数のタイムスロットを含む受信サイクル期間において、ソースノードが属するグループに関連付けられたタイムスロットにおいてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定され、前記複数のタイムスロットに引き続く1つ以上のアイドルタイムスロットにおいて、前記ソースノードのいずれからも光信号を受信せず、前記平均着信トラフィックを越えるトラフィックを処理することを特徴とする。
 別の実施態様の光ネットワークは、フルメッシュネットワーク構成を有する光コア部と、前記光コア部に接続された複数のノードであって、複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれている、複数のノードとを備えた光ネットワークであって、前記複数のノードの各々は、複数のタイムスロットを含む受信サイクル期間において、ソースノードが属するグループに関連付けられたタイムスロットにおいてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定され、前記最大m個のノードから受信された光信号に対応する電気信号をスイッチングし、複数のサーバーへルーティングするASICスイッチであって、前記複数のノードの平均着信トラフィックに対応するスイッチング容量を有し、前記タイムスロットに同期して動作するメインスイッチ、および、前記平均着信トラフィックを越えるトラフィックを処理可能なスイッチング容量を有し、前記タイムスロットに関係なく動作する補助スイッチを有することを特徴とする。
 上述の光ネットワークは、光ネットワーク内のネットワークノードの発明としての側面も持っている。      
 本開示の光ネットワークによりノード構成を簡略化し、ASICスイッチの容量、消費電力を減らす。光ネットワークの大規模化、低消費電力化にも対応する。
従来技術のDCネットワークの構成を示した図である。 本開示によるDCネットワークの基本構成を示した図である。 従来技術の光ネットワーク周辺部のノードの問題を説明する図である。 本開示の光ネットワーク、受信ノードの構成を概念的に示した図である。 本開示の光ネットワークで得られる受信機の削減効果を示した図である。 光ネットワークの受信ノードにおけるデータ受信動作を説明する図である。 異なるグループ構成のネットワークの受信動作の別の例を示した図である。 本開示による例示的なネットワークおよびノードの仕様を示す。 受信ノードで必要とされる受信帯域幅の異なる概念を説明する図である。 異なる平均接続数の複数のノードの取り得る組合せを説明する図である。 ネットワーク分割によるノード対間の実効BW劣化を説明する図である。 DCネットワーク内のトラフィックの異なる帯域幅を説明する図である。 受信ASICスイッチの縮小された帯域幅の概念を説明する図である。 平均帯域幅BWswitch_avgと受信サイクル期間Tの関係を示す図である。 係数Fの導入に伴う、拡張した受信サイクル期間を説明する図である。 係数Fの導入に伴う、修正されたスイッチを含むノードの構成図である。 修正されたスイッチにおける遅延を軽減するノードの構成図である。
 以下の開示は、所望のノード対間でエンドツーエンド光伝送を、コア部の光スイッチング、ネットワーク周辺部でのみの電気的スイッチングで実現するDCネットワーク構造を含む。発明者らは、性能限界に直面している電気スイッチをより効率的に利用するDCネットワーク構造の提案を行ってきた。本明細書では、新しいアプローチで電気スイッチにおける容量(帯域幅:BW)の限界に柔軟に対処する新しい仕組みを提案する。最初に、基本構成となる、タイムスロット動作によって着信ノードにおける帯域幅を制限するDCネットワークおよびノードについて概要を述べる。その後、基本構成のDCネットワークにおけるASICスイッチの性能限界に対処する新しい仕組みについて説明する。
[光ネットワークのコア部構成]
 図2は、本開示によるDCネットワークの基本構成を示す図である。詳細は後述するが、DCネットワーク1は、ネットワーク全体のコア部分であるフラット光ネットワーク2と、ネットワーク全体の周辺部にあるSW部3、ToR4、サーバー5とを含む。これらの周辺部の要素は、ノードの一部を構成する。図2では、簡単のため4つのToRを含むものを1ノードとして、2つのノードが示されているが、他の多くのノードがフラット光ネットワーク2の周辺にあるものと理解されたい。既に述べたように、コア部分であるフラット光ネットワーク2で光スイッチングを利用し、電気的スイッチングはその周辺部分であるSW部3およびその周辺側でのみ利用される。図2の光ネットワーク構造はスケーラブルであり、任意の対のノード間の高度に動的な接続をサポートする。含まれるノード数に応じて、ネットワークのコア部分は、物理的なフルメッシュネットワークとして、または、フルメッシュ様ネットワークとして実装できる。 
 図2に示した本開示のDCネットワークで前提とするフルメッシュネットワークまたはフルメッシュ様ネットワークは、図1の従来技術のDCネットワーク100と比べて、コア部において光スイッチングのみを利用している点で相違している。図2のフラット光ネットワーク2では、図1の各階層のSW101、103におけるOEO変換を行わずに、光スイッチングのみを利用している。
 以下の開示では、各ノードにおける、新規で実用的なデータ受信機構およびその関連ハードウェアを明らかにする。これらは、これまで必要としていた多数の光受信機ユニットおよび複雑な大容量スイッチング構成の一部を置き換えるものである。本開示の光ネットワークの構成の基本的なアプローチは、ネットワークノードから同じ宛先ノードへの伝送に対して、わずかな時間領域的制限を導入することにある。具体的には、本開示のネットワークは、タイムスロット方式によって動作する
[光ネットワーク周辺部の受信の問題]
 図1に示した従来技術のNノードのDCネットワークで物理的なフルメッシュ接続を実現する場合、送信機、受信機、双方向光リンクの数がN×(N-1)個となるため、膨大なリソースが要求される。このようなフルメッシュネットワークまたはフルメッシュ様ネットワークでは、各ノードにおいて、大規模なスイッチング構成が必要となる。N個のノードを持つフルメッシュまたはフルメッシュ様ネットワークでは、ネットワーク内の任意の宛先ノードは、N-1個まで可能な任意の数のソースノードによって同時にアドレス指定(addressing)することができる。ここで「アドレス指定」とは、ノード間において通信リンクを設定するために、ソースノードが相手方の宛先ノードを通信先として特定し、指定することだけに限らず、実際に通信リンクを設定し、通信を実施することも含むものとする。
 図3は、従来技術の光ネットワーク周辺部のノードにおける問題を説明する図である。図3はフルメッシュの光ネットワーク140を概念的に示しており、図2に示したフラット光ネットワーク1を、ノードの集合として表したものである。光ネットワーク140は、多数のノードが相互に接続されている。図3では、1つのノードに対して隣接する4ノードが相互接続されているように描かれているが、これは、光ネットワーク内のすべてのノードに接続されていることをシンボル的に示している。
 ここで、1つの受信ノード141に着目する。受信ノード141は、光ネットワーク側とのインタフェース部144を有しており、さらにToR145に接続されている。インタフェース部144は、同時に着信する複数の光信号142を受信する受信機143を備えている。光ネットワーク140がN個のノードで構成されていれば、同時に着信するすべてのデータ通信を処理するため、受信ノード141では多数のポートと対応する(N-1)個の受信機143が必要となる。さらにインタフェース部144は、図示しない大規模構成の受信ASICスイッチを備えている。最初に述べたように、ASICスイッチに入出力する光信号に、非常に高いデータレートが求められている。図3からも、全受信ノードにおいて、多数の受信機と大規模なASICスイッチが必要であることが理解できる。このようにフラット光ネットワークの周辺部にあるノードには、膨大な数の受信機の必要性とASICスイッチの容量限界の問題がある。これらを解決するために、本開示の光ネットワークでは、ネットワークノードから同じ宛先ノードへのデータ伝送に対して、わずかな時間領域の制限の導入を提案する。
[提案するネットワーク方式]
A.受信機の数の削減
 図4は、本開示の光ネットワークおよび受信ノードの基本構成を概念的に示す図である。図3と同様に、図4はフルメッシュまたはフルメッシュ様の光ネットワーク10を概念的に示している。簡単のため光ネットワーク10は、N個(例えば36)のノードからなっており、一例として、送信元ノードすなわちソースノード11および宛先ノードすなわち受信ノート13の間のデータ伝送を考える。当然のことであるが、以後の説明において、ソースノードは受信ノードともなり得るのであって、説明する動作・機能に応じて呼称を区別しているに過ぎない。したがって、受信ノードで説明している機能・構成を、ソースノードも同様に有していることに留意されたい。
 光ネットワーク10では、ソースノードである全てのN個のネットワークノードを多数のグループ(d個)に分割し、各ソースノードが所属するグループが定義されている。図4の例では、第1のグループ(G1)~第6のグループ(G6)の6つのグループが定義されており、ソースノード11は第1のグループ12に属している。
 任意のノードすなわち任意の受信ノードにおけるデータ通信の受信は、後述するように、ソースノードの属するグループ毎に、固定された持続時間Tのタイムスロットにおいて、別々に行われる。すなわち受信ノードは、ソースノードのグループに割り当てられたタイムスロットの間にのみ、そのグループに属する任意のソースノードによってアドレス指定され得る。具体的には受信ノード13は、ソースノード11の属するG1に割り当てられたタイムスロットの間に、ソースノード11からのデータを受信する。さらにG1に属する他の5つのソースノードからも、同じタイムスロットの間にアドレス指定される。
 図4において1つのグループに属するノードは、ここでは説明のために近接したものとして示しているが、一般的にはネットワーク全体に空間的に分散している。受信ノードは、異なるグループからタイムスロット毎に順次連続的にデータを受信し、すべてのグループからの受信が完了するサイクルの時間は、d(分割数)×T(TS時間)である。各グループのノード数が均一であるネットワーク分割の場合、同一グループに属するノード数mは、m=N/dとなる。
 上述のように、受信ノードにおけるデータ受信に時間的な制限を設けた場合、いずれの受信ノードにおいても、m個の受信機を設置することで、起こりうる最大の同時着信トラフィックに対応する必要がある。ここで各ノードの最大発信帯域幅(BW:Bandwidth)をBoutとする。以後の説明でも使用する用語「帯域幅」とは、ノードによって受信または送信することのできる伝送帯域幅の意味であり、伝送速度(伝送レート)として理解しても良い。用語「帯域幅」は、光通信の変調方式や信号構成に応じて決定されるデータ伝送のための通信リソースの容量を意味する広い概念であることに留意されたい。
 通常、ノードから発信できる帯域幅と、ノードで受信できる帯域幅は同じであって、最大発信帯域幅をBoutは最大受信帯域幅でもある。割り当てられたタイムスロットTの間では、特定の受信ノードに対して、このBoutの全帯域を投じることができる。しかしながら、あるソースノードが同じ受信ノードへ再びアドレス指定できるためには、1回の受信サイクルが経過するまで待たなければならない。十分長い観測時間に対しては、2つのノード間の実質的な帯域幅である実効BWは、Bout/dとなる。一般にネットワークにおけるノードグループの数dを増加させると、任意のノード対の間の実効BWが減少することになる。この実効BWの値を高める新しい仕組みは、図4の本開示の光ネットワークおよび受信ノードにおける電気スイッチの性能限界に対処するものとして後述される。
 上述のソースノードから同じ受信ノードへのデータ伝送に対して、わずかな時間領域的制限を導入することで、図4の本開示の光ネットワークにおけるノードでは、図3に示した従来技術の構成のノードと比べて、受信機の数を大幅に減らすことができる。
 図4を再び参照すると、受信ノード13の詳細が下側に詳細図として示されており、図3に示した従来技術による受信ノードの構成と比較して説明する。本開示の光ネットワークにおけるノード13では、受信データの入力光信号を受信するノードフロント部において、異なる波長(d個の異なるグループ)からの光信号を合波するアレイ導波路回折格子(AWG:Arrayed Waveguide Grating)14が追加されている。N個のノードからのデータを同時に受信できるように、AWG14の各々は少なくともグループの数d個の入力ポートを有し、ノード13のフロント部では1つのグループ内のノード数m個のAWGを備える。m個のAWG14を経て、合波された受信データは、従来技術と同様のインタフェース部15に供給され、受信機16に入力される。ここでインタフェース部15における受信機16の数は、図3の従来技術の構成と比べて、1/mに大幅に減少している。
 図5は、本開示の光ネットワークにおけるノードをグループに分割することで得られる受信機の削減効果を示す図である。図5では、ノードにおける受信機(Rxユニット)の数と全ノード数の関係を、分割数すなわちグループの数をパラメータとして示しており、縦軸の受信機数を(a)では対数表示で、(b)ではリニア表示で示している。ノード数に関係なく、分割数が増えるに従って、必要受信機数を大幅に減らすことができる。
 したがって本開示の光ネットワークは、フルメッシュネットワーク構成を有する光コア部2と、前記光コア部に接続された複数のノードであって、複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれている、複数のノードとを備え、前記複数のノードの各々13は、ソースノード11が属するグループに関連付けられたタイムスロットにおいてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定されるものとして実施できる。また、前記複数のノードの各々は、m個のアレイ導波路回折格子(AWG)14であって、当該AWGの複数の入力ポートは同一のグループに属する前記最大m個のノードから対応する光信号を受信し、前記複数の入力ポートの動作波長に適合するように、前記最大m個のノードの内の1つ以上のソースノードの使用波長が設定されている、AWGと、前記AWGの出力合波ポートに接続されたm個の受信機16と、前記m個の受信機からの電気信号をスイッチングして、複数のサーバー18にルーティングするASICスイッチ17とを有するものとして実施できる。
 上の説明では光ネットワークの発明として説明したが、ネットワークノードの発明としての側面も持っている点に留意されたい。例えば、フルメッシュネットワーク構成を有する光コア部に接続されたノードであって、当該ノードは、前記コア部に接続された他の複数のノードとともに複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれており、前記最大m個のノードの各々は、ソースノードが属するグループに関連付けられたタイムスロットにおいてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定されるものとして実施できる。
 再び図4の受信ノードの基本構成に戻ると、受信ノード13のインタフェース部15は、従来技術の構成と同じく受信ASICスイッチ17を備えている。しかしながら後述するように、そのスイッチング容量は、従来技術よりも大幅に減らされている。受信ノードにおけるインタフェース部の構成は、受信機の数および受信ASICスイッチの容量の点で、従来技術と比較して大幅に簡素化されている。さらに詳細な受信ノードの動作および受信ASICスイッチの帯域幅の削減について述べる。
B.受信切り替えの簡素化
 前述の1つのノードの最大発信帯域幅をBoutおよび1つのグループ内のノード数mを使えば、図4の基本構成のノードが任意のタイムスロットで受信する最大BWは、m×Boutとなる。この最大BWは、タイムスロットを使用しないで完全な非同期動作(例えば光パケットスイッチング)でデータを受信する場合のBWと比較して、約1/dに減少する。図4の受信ノードの構成で示したように、受信ノードへの入力データは、所望のToRスイッチ18へ切り替える必要がある。この切り替えに、受信ASICスイッチ17が使用される。
 図6は、本開示の光ネットワークにおける基本構成の受信ノードのデータ受信動作を説明する図である。図6の(a)はタイムスロット構成を示しており、(b)はTS1においてデータ受信をしているときの切り替え動作を説明する図である。(b)のインタフェース部15のASICスイッチ17は、ネットワークに面している入力側にm個のポートを、もう一方の出力側にToRスイッチ18の数に相当するポート数をそれぞれ有している。ToRスイッチごとに複数のリンクを使用する場合は、その複数のリンクに応じたポート数が存在している。
 図6の(a)のタイムスロット構成は、図4に示した光ネットワーク10の全ノードを6つのグループに分割した場合の例を示しており、各グループに属するm個のノードは対応するタイムスロットのみで受信を行う。例えば、第1のグループに属する6つのソースノードからのデータは、(b)に示したようにTS1においてのみ各AWGの対応するポートで受信される。1つのグループ内に存在するノード数と同数のm個のAWG14-1~14-6において、m個の異なるソースノードからのデータが受信される。したがって、特定のタイムスロットでは、ASICスイッチ17のm個の入力ポートの各々が、同一グループ内の異なるソースノードから受信したデータを取り込むことができる。すなわち、同一グループ内のm個の全ソースノードから、同時にデータ受信が可能である。
 図6の(b)に示したように、異なるグループのスイッチング処理を簡単にするため、ASICスイッチ17の入力側の各ポートにAWGが接続されており、同じグループのノードは、別々のAWGに接続されている。割り当てられたタイムスロットの間、許可されたグループのノードだけがアクティブとなる一方で、他のグループのすべてのノードは、宛先ノードに送信を行わない。
 例示のために、TS1においてアクティブなグループ(例えばG1)のすべてのノードによって、同じ波長λ1が使用されると仮定する。波長λ1の入力信号は、複数(m個)のAWGによってASICスイッチ17に向かって、受動的にルーティングされることになる。すなわち、同一グループ内の異なるノードと、m個のAWGの対応する波長のポートとを接続することによって、ルーティングされている。次のTS2において、次のアクティブなグループ(G2)のすべてのノードがλ2で送信しているとする。このときも、G2に属する各ノードからのλ2の入力信号は、複数(m個)のAWGによってASICスイッチ17に向かって受動的にルーティングされる。
 一般に、同じグループ内のノードが同じ波長で送信する必要はない。同じAWGに接続された異なるグループのノードによって使用される複数の波長が、競合を生じないようにそれぞれ異なる波長に調整されれば良い。上述の説明の様に、同一のグループ内のすべてのノードで同一の波長を使用すれば、受信ノードにおけるAWGの構成を共通化できる。
 図7は、さらに異なるグループ構成のネットワークにおける受信切り替えの別の動作例を示す図である。図7では、全ノード数N=512、グループ数(分割数)d=16、グループ内のノード数m=32の場合について、(a)G1からのTS1における受信の例、(b)G2からのTS2における受信の例、(c)G16からのTS16における受信の例をそれぞれ示す。各図では、AWGの入力にノード番号(1~512)を示している。本例でも、同一のグループ内の32個のノードは同一の波長を使用するものとして示したが、AWG毎に波長が異なっていても良い。受信ノードにおいて32個のAWG14-1~14-32を使用することで、同一のタイムスロットにおいて、同一グループに属する32個の異なるノードから、同時にデータを受信できる。この構成では、受信ノードのインタフェース部において32個のAWGに対応する32個の受信機を備えれば良い。
 図8は、本開示による例示的なネットワークおよびノードの仕様を示す。16分割されたネットワークおよび対応する16のタイムスロットによる構成のパラメータの例を示している。具体的には、1タイムスロットは、400Gb/sパケットに対応する30nsおよびマージンの10nsを合わせて、40nsの長さとなる。1サイクルは、16のタイムスロットに分割され、512個のネットワークノードは16のグループに分割される。1グループ内のノード数は32である。各タイムスロットの宛先(受信)ノードは、許可されたグループによってのみアドレス指定される。同じソースノードは、同じ宛先ノードを16タイムスロット毎にアドレス指定できる。
C.受信ASICスイッチのBWの削減
 図4の説明でも言及したように、本開示の光ネットワークにおける基本構成のノードでは、従来技術と比べて、受信ASICスイッチの容量を大幅に抑える構成とした。具体的には、受信ASICスイッチの容量を、平均着信トラフィックに一致するか、または平均着信トラフィックをわずかに超える値に設定する。このスイッチング容量を超えるトラフィックを若干の遅延を伴って処理するために、受信ASICスイッチに関連付けられたメモリを備える。以下、図9および図10とともに、本開示のフラット光ネットワークの基本的なノードにおいて、受信ASICスイッチの容量を従来技術のノードよりも削減しても、実質的に十分なトラフィックを扱えることを説明する。
 発明者らは、ノード内のASICスイッチのスイッチング負荷を低減するために、受信ノードに入力されるトラフィック、言い換えると受信ノードの入力帯域幅BWを、異なる要求を持つ2つのカテゴリに分類して検討した。2つのトラフィックのカテゴリは、(a)追加の遅延なしにリアルタイムでスイッチングする必要があるトラフィック、(b)接続されたサーバーの処理能力を既に超えてしまっているために、受信ASICスイッチではリアルタイムですべてスイッチングする必要がないトラフィックである。(a)のトラフィックに対しては平均受信BWが割り当てられ、(b)のトラフィックに対しては最大受信BWが割り当てられるものとする。以下では、受信ASICスイッチのスイッチング容量すなわち受信ASICスイッチの伝送帯域を、2つのカテゴリのトラフィックに対応する異なるBWにどのように配分できるかについて考える。
 リアルタイム処理を要しない最大受信BWの場合に、受信ノードの受信データを部分的に記憶するための記憶媒体(メモリ)を導入することは、受信データが失われたり、再送信したりする必要がないことを保証する。記憶媒体を導入する主な利点は、余分な追加遅延を導入する犠牲を受け入れる代わりに、受信ASICスイッチのスイッチング容量を減少させることができることである。
 図9は、受信ノードにおいて必要とされる受信帯域幅の異なる概念を説明する図である。図9の(a)では、グループ数(ネットワークの分割数)dをパラメータ(d=8、16、24、32)として、1つのノードが受信できる帯域幅Boutで正規化された受信BWと、ネットワークのノード数Nとの関係を示している。ここで受信ノードの帯域幅Boutは、図4で説明したソースノードの最大発信帯域幅と同一である。512のノードを16のグループに分割したネットワークを例とすると、各受信ノードは、ノード自身で生成可能なBWの32倍である正規化した最大BWを収容するために、32(=512/16)の受信機ユニットを備えるべきである。正規化した平均受信BWを8と仮定すると、受信ASICスイッチのスイッチング容量は最大スイッチング負荷の場合と比較して8/32だけ低減される。図9の(b)は上述の2つの受信帯域幅を説明する図であり、AWGの出力が接続されるインタフェース部のフロントでは、32ノードからのすべての入力データを確実に同時に受信するために32の受信機が必要なことを示している。一方で、インタフェース部内の受信ASICスイッチは、メモリを備えることで8ノード分の平均受信BWを備えて、8ノード分のリアルタイムスイッチング処理をすれば良いことを示している。
 平均受信BWはノード毎に変動し得るが、限られた数の特定のノードを除いては、通常、最大受信BWよりも平均受信BWを大幅に低く設定することができる。これは、図2に示した本開示のDCネットワークで前提とするフラット光ネットワーク2におけるトラフィックの自然なバランスによるものである。このバランスメカニズムは、フラット光ネットワークにおけるトラフィックの性質として、次のように説明できる。
 図10は、異なる平均接続数を持つ複数のノードの取り得る組み合わせを説明する図である。ここで、フラット光ネットワークにおいて前提となるトラフィックの性質について説明する。均一な接続性と100%のトラフィック負荷を持つフラット光ネットワークでは、1つのノードあたりの平均受信接続数は1となる。この状態から、ノードが平均してより多くの接続を受信するようになると、平均受信接続数が1の状態から逸脱し始める。このときフラット光ネットワークでは、あるノードによって受信されていたトラフィックは新しいビジーなノードへ向けられることを意味している。より多くのノードがビジーになると、残りのノードの平均接続数は自然に減少する。
 図10の例ではこのバランスメカニズムのアイデアを数値で解明するために、512ノードで、100%トラフィック負荷のネットワークの例についてシミュレーションを行った。一般性を失わずに計算を単純化するために、ネットワークノードを3つのカテゴリに分類した。すなわち、(a)受信した接続の平均数がQ(>1)となるビジーノード、(b)受信した接続の平均数が1となる非ビジーノード、(c)データを受信していないノードの3つである。図10の横軸には、カテゴリー(b)のトラフィックを持つ非ビジーノードの割合を%で示している。縦軸には、上述のカテゴリー(a)のトラフィックに対応し、1より大きい平均接続数Qを持つビジーノードの最大割合を%で示している。したがって図10のグラフは、カテゴリー(a)のビジーノードの平均接続数Qの値をパラメータとし、100%トラフィック負荷の条件を満たすカテゴリー(b)のノード割合(横軸)と、カテゴリー(a)のノード割合(縦軸)との関係を示していることになる。
 図10に示したように、ビジーノードの平均接続数Qの値が2、4、6、8と大きくなると、そのような平均接続数Qを持つカテゴリー(a)のビジーノードの最大割合は大幅に減少する。具体的にAで示した点は、接続数1のカテゴリー(b)の非ビジーノードの割合が10%、データを受信しておらず接続数0カテゴリー(c)のノードの割合が79%という極端な条件を表している。このような条件下であっても、最大11%のノード(100-10-79=11)が8の平均接続数Qを持ち得ることがわかる。このA点では、大多数(79%)のノードでデータを受信しておらず、残りのノードは、少数(10%)の非ビジーノード(Q=1)と、少数(11%)の平均接続数Q=8のトラフィックが集中したノードであるようなノード分布状態で、100%トラフィック負荷のネットワークが成立している。この例では、受信ASICスイッチの最大受信スイッチング容量の観点からは、平均着信トラフィック程度の、わずかな容量しか持たない受信ASICスイッチでも十分に使用できることが強く示されている。図10のトラフィック負荷のシミュレーションは、512ノードを16グループに分割したネットワークでは、受信ASICスイッチの容量を、平均受信トラフィックに対応する正規化平均受信BW=8に設定しておけば、十分にトラフィックを処理できることを示している。
 図9の(b)に示したように、本開示の光ネットワークにおける基本構成の受信ノードでは、異なるソースノードからの受信データを受動的にルーティングする複数のAWG14およびインタフェース部15を備える。インタフェース部15のフロントには受信機および受信ASICスイッチ17を備え、さらに受信ASICスイッチ17と連動する記憶手段(メモリ)19を備える。受信ASICスイッチ17の容量を、平均受信トラフィックに一致するか、または平均受信トラフィックをわずかに超えるものとし、記憶手段19を利用して、このスイッチング容量を超えるトラフィックをわずかの遅延を伴って処理できる。
 これまで説明したように、本開示の基本構成の光ネットワークは、受信ノードにおけるデータ受信に制限を加えるため、ソースノードから同じ宛先ノードへの伝送に対してタイムスロット方式によって動作している。ソースノードは、同じ宛先ノードを再びアドレス指定できるようになるまでに、一周分の受信サイクルが経過するまで待たなければならない。データ受信の制限によって、実質的な伝送レートが低下することになり、ノード対間のデータ伝送の実効BWが劣化することになる。
 図11は、ネットワークの分割による任意のノード対間の実効BWの劣化を説明する図である。横軸にはネットワークの分割数(グループ数)dを、縦軸には受信ノードにおける最大発信BWのBoutで正規化した受信BWを示す。図11に示したように、ネットワーク分割数dの増加とともに受信BWは低下し、例えば、分割数dが8から32に増加すると、受信BWは12.5%から3.12%に低下する。ネットワークの分割によって生じる、ノード対間のこのような実効BWの低下を補うようなメカニズムが必要となる。発明者らは、基本構成の光ネットワークにおける実効BWの低下の問題の解決のため、ソースノードの動作に対する修正、任意のノード間の伝送路に対する修正の2つ解決法を提案していた。1つの解決法は、ソースノードが1つ以上のタイムスロットにおいて所望の宛先ノードに到達できるようにするものであり、もう1つの解決法は、任意のノード対間に別の光回線を設定して、実効BWを高めるものであった。
 本明細書では、ノード対間の実効BWの低下の問題の解決に加え、上述の基本構成の光ネットワークにおいて、タイムスロットの構成または受信ノードの電気スイッチの構成に対して修正を加えることを提案する。先の解決方法とは異なる新しい視点から、ASICスイッチにおける性能限界に対処する方法を提案する。
[受信ノードの最大着信帯域幅BWin_maxに対する係数Fの導入]
 いくらかの妥協を伴って、最大トラフィックを処理することが維持できれば、ネットワークノードにおける受信ASICスイッチの帯域幅BWswitch_avgを、最大の受信帯域幅BWin_maxの一部F(0<F<1)に設定することが可能である。最初に述べたような急増するトラフィック量とスイッチング技術の限界に対処するためには、ASICスイッチにおけるスイッチング容量(帯域幅)を現実的に利用可能な値にまで低減することが必要であろう。ここでまず図4に示した基本構成のDCネットワークの各部における帯域幅の異なる概念について説明する。
 図12は、DCネットワーク内のトラフィックの異なる帯域幅を説明する図である。図12では、図4に示した本開示のDCネットワークの基本構成と同一のものを示している。ここで、ネットワークノードに関連して、異なる視点から見た帯域幅の様々な定義を示す。
 (定義1)BWout: 各ノードからの総出力帯域幅
 (定義2)BWin_max: 各ノードの最大着信帯域幅(受信スイッチへ)
 (定義3)BWnetwork:ネットワークの総帯域幅
 図12を参照すると、ネットワーク10全体の総帯域幅BWoutは矢印22で表され、個々のノードから総出力帯域幅BWoutは矢印23で表される。ネットワーク10のノード数をNとすれば、次の関係が成り立つ。
BWnetwork =BWout×N        式(1)
 図12において、性能限界が問題になっている受信ASICスイッチを含む受信ノードの最大着信帯域幅BWin_maxは、矢印24で表されている。本開示のDCネットワークでは、既に図9および図10においても説明したように、受信ASICスイッチ17と連動する記憶手段19を備えることができる。これによって、受信ASICスイッチ17のスイッチング容量を、平均受信トラフィックに一致するか、または平均受信トラフィックをわずかに超えるものに設定し、記憶手段19を利用して、このスイッチング容量を超えるトラフィックをわずかの遅延を伴って処理できる。図12において、受信ASICスイッチに対する平均帯域幅BWswitch_avgは、矢印25で表わされている。
 発明者らは、受信ASICスイッチに対して、その時々で利用可能な最大容量の帯域幅に割り当てることでは、急激なトラフィックの増加やASIC技術進展の制限的状況に柔軟に対応するのが難しいと考えた。受信スイッチの帯域幅BWswitch_avgを、予め、平均受信トラフィックに一致するかまたはわずかに超えるものと設定するに留まらず、最大の受信帯域幅BWin_maxの一部F(Fraction:0<F<1)として、より広い範囲に設定する着想に至った。そこで本実施形態のDCネットワークでは、図12における受信ASICスイッチ17に対する平均帯域幅BWswitch_avgを、最大着信帯域幅BWin_maxが係数Fによって「縮小された帯域幅」に設定する。ASICスイッチの性能限界に対処する本実施形態のDCネットワークの構成では、ASICスイッチの帯域幅について次の関係がさらに定義される。
 (定義4)BWswitch_avg:ノードにおけるメインASICスイッチの縮小された帯域幅
 (定義5)係数F:ノードへの最大着信帯域幅BWin_maxに対する、ASICスイッチへの縮小された帯域幅BWswitch_avgの比
上記の「縮小された帯域幅」の定義(5)より次式が得られる。
BWswitch_avg=F×BWin_max      式(2)
 図4に示したDCネットワーク構成において、ASICスイッチが、要求される最大の受信帯域幅BWin_maxに見合った帯域幅を満たすことが難しければ、「縮小された帯域幅」を導入することは合理的とも言える。係数Fを導入することで、現実的に利用可能なASICスイッチの帯域幅に柔軟に対応できる。また、同時にネットワークの総帯域幅BWnetworkを同じ係数Fのファクタで増加させることができる。さらに受信ASICスイッチの帯域幅を制限することで、一般にノードの消費電力を減らすことも可能となる。このように受信ASICスイッチの帯域幅に係数Fを導入することは、ネットワークのスケーラビリティのために有益である。
 図13は、本実施形態のDCネットワークにおいてASICスイッチの縮小された帯域幅の概念を説明する図である。図13の(a)は、受信ノードにおける平均帯域幅BWswitch_avgおよび最大着信帯域幅BWin_maxの関係を端的に示している。図13に示すように、受信ASICスイッチ17の平均帯域幅BWswitch_avg25は、ノードへの最大着信帯域幅BWin_max24の一部(Fraction)に設定され、係数Fによって最大着信帯域幅BWin_max24は二分される。上述の(定義5)のように、係数Fは最大着信帯域幅BWin_max24とASICスイッチへ割当てられる平均帯域幅BWswitch_avg25との比率を表し、0<F<1の範囲にある。
 ネットワーク10におけるグループの数(分割数)をdとすれば、同一グループに属するノード数mは、m=N/dとなる。また、すべてのノードグループからの受信が完了する受信サイクル期間をTとする。
 すべてのノードグループからの受信が完了する受信サイクルはTであり、d個のグループに対応したタイムスロット構造を有する受信サイクルTの構成から、各ノードの最大着信帯域幅BWin_maxを次式で表すことができる。
BWin_max=BWout×m=BWout ×(N/d)    式(3)
式(3)は、式(1)および式(2)を使って変形され、帯域幅の視点から、グループ数dを次式によっても表すことができる。
BWin_max=(BWnetwork /N)×(N/d)
d=BWnetwork /BWin_max             式(4)
図6および図8に示したように、1つのTS時間をtTSとすれば、受信サイクル期間Tはグループ数dと次式の関係を有する。
T=tTS×BWnetwork /BWin_max          式(5)
式(2)~(5)から、さらに次の関係が得られる。
T×BWswitch_avg=tTS×F×BWnetwork        式(6)
 式(6)における、ASICスイッチに対する平均帯域幅BWswitch_avgおよびネットワークの総帯域幅BWnetworkの間の、係数Fを介した関係は、前述のネットワークのスケーラビリティを説明している。式(6)では、係数FとBWnetworkの積(右辺)は、受信サイクル期間TおよびBWswitch_avgの所与の値(左辺)に対して固定される。例えば、ネットワークの総帯域幅BWnetworkが変動すれば、この変動に対応して係数Fを増減して設定することで、式(6)の関係は維持される。言い換えると、係数Fの設定値を可変することで、同一の受信サイクル期間Tおよび受信スイッチの平均帯域幅BWswitch_avgの構成を維持できる。
 図14は、受信ASICスイッチの平均帯域幅BWswitch_avgと受信サイクル期間Tとの関係を示す図である。図14では、係数Fを導入したDCネットワークにおいて、横軸を受信スイッチの平均帯域幅BWswitch_avg(Tbps)、縦軸を受信サイクル期間T(nsec)とし、ネットワーク総帯域幅BWnetworkをパラメータとして両者の関係を計算して示した。計算の前提条件として、受信ノードのASICスイッチに対して定義(5)で示した係数Fを導入して、ASICスイッチの平均帯域幅BWswitch_avgをノードへの最大着信帯域幅BWin_maxの30%(F=0.3)とした。また、1ノード当たり総出力帯域幅BWoutを400Gbps、タイムスロット時間tTSを40ns、ネットワーク総帯域幅BWnetworkを51.2Tbps~1.64Pbpsの範囲でパラメータとし、6曲線を示している。
 図14のグラフから、ASICスイッチの平均帯域幅BWswitch_avgが大きいほど受信サイクル期間Tが短くなり、逆にASICスイッチの平均帯域幅BWswitch_avgが小さいほど受信サイクル期間Tが長くなる。リアルタイムに処理可能な受信スイッチの平均帯域幅BWswitch_avgについて、左側のプロットが現在のASIC技術の水準に、右側のプロットが将来予期されるASIC技術の水準に対応する。ネットワーク総帯域幅BWnetworkが増えれば、受信サイクル期間Tが長くなることがわかる。受信サイクル期間Tは、本開示のDCネットワークのタイムスロット方式において、次にデータを受信するまで期間であるので、より短いことが望ましい。図14のグラフは、受信サイクル期間Tの設定値も含めて、式(6)における係数Fの導入によって、ASICスイッチ平均帯域幅BWswitch_avgおよびネットワーク総帯域幅BWnetworkの間がスケーラブルとなる関係を示している。
 次に、係数Fによる「縮小された帯域幅」を受信ASCIスイッチへ導入するための、より具体的なノードの構成についてさらに説明する。
[拡張した受信サイクル期間による平均を超えた入力トラフィックの処理]
 受信ノードの最大着信帯域幅BWin_maxに対し係数Fを導入して、ASICスイッチの平均帯域幅BWswitch_avgを「縮小された帯域幅」とする場合、ASICスイッチで平均を超える入力トラフィックを処理する必要がある。平均を超える入力トラフィックを処理するための第1のアイデアはシンプルであり、いずれのノードからも実際にデータを受信することのない1つ以上のタイムスロットを追加することに基づく。この追加のタイムスロットは、アイドルタイムスロットであって、拡張した受信サイクル期間が構成される。
 ここで再び図13を参照すると、図13の(b)は係数Fで帯域幅を制限されたASICスイッチで、平均を超える入力トラフィックを処理する方法の2つの概念を示す。図13の(b)の上側の第1の解決法は、時間軸上で、受信サイクル期間Tにノードからデータを受信しないアイドリングタイムスロット26を追加する拡張した受信サイクル期間の構成を示している。このアイドリングタイムスロット26は、受信ASICスイッチが一時的に保存された、平均(平均帯域幅BWswitch_avg)を超えた入力トラフィックの追加のトラフィック分のためのスイッチングを行うことを可能にする。このアイドルタイムスロットは、どのノードからも実際にデータを受信することはなく、アドレス指定もされず、未割当ての状態のままとなる。
 図15は、係数Fの導入に伴う、拡張した受信サイクル期間の構成を説明する図である。図6および図8で説明した通常のタイムスロット構成30とともに、拡張した受信サイクルのタイムスロット構成31を示している。図15の例では、通常のタイムスロット構成30は16のタイムススロット(TS1~TS16)から構成され、それぞれのタイムスロットに16のグループの1グループが対応している。通常のタイムスロット構成30では、受信サイクル期間T33は、TS時間×グループ数(16)となる。
 一方、拡張された受信サイクル期間TEXTEND35は、受信サイクル期間T33に引き続いて、アイドル時間34を備える。図15では、アイドル時間34として1つのタイムスロット相当の期間が追加されているが、アイドル時間34は、1つ以上のタイムスロット相当の期間であり得る。アイドル時間34においては、どのネットワークグループからもアドレス指定されず、データも受信しない。各タイムスロットで平均を超える入力トラフィックのため処理ができなかった追加の(過剰な)トラフィックを、アイドル時間34において、受信ASICスイッチで処理をすることができる。この解決法では、拡張した受信サイクル期間TEXTEND35における時間によって、ASICスイッチによるスイッチング処理を2つに分けている。1つは、通常の受信サイクル期間T33において、ノードグループ毎に時間的な制限を伴って平均帯域幅BWswitch_avgの範囲内で実施される処理である。もう1つは、アイドル時間34において、所属するノードグループに依存した時間的な制限なしに実施される処理である。この解決法では、受信ノードの構成に変更は不要であって、図9に示した記憶手段19を利用して、平均帯域幅BWswitch_avgを超えるトラフィックをアイドル時間34において処理できる。
 したがって本開示の光ネットワークは、フルメッシュネットワーク構成を有する光コア部と、前記光コア部に接続された複数のノードであって、複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれている、複数のノードとを備えた光ネットワークであって、前記複数のノードの各々は、前記最大m個のノードから受信された光信号に対応する電気信号をスイッチングし、複数のサーバーへルーティングするASICスイッチであって、前記複数のノードの平均着信トラフィックに対応するスイッチング容量を有するASICスイッチを有し、複数のタイムスロットを含む受信サイクル期間において、ソースノードが属するグループに関連付けられたタイムスロット33においてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定され、前記複数のタイムスロットに引き続く1つ以上のアイドルタイムスロット34において、前記ソースノードのいずれからも光信号を受信せず、前記平均着信トラフィックを越えるトラフィックを処理するものとして実施できる。
 ここで、iをタイムスロットのインデックスとして、1つの受信サイクル期間Tの各タイムスロットにおける入力帯域幅をBWとする。ASICスイッチに到来するトラフィック量は、タイムスロット毎に変化し、BWと平均帯域幅BWswitch_avgとの間の差を、ΔBWと表す。アイドル時間34としてS個のアイドルタイムスロットを追加するとき、受信ASICスイッチが処理できる最大の追加のトラフィックは、次の式のように制限される。次式では1つの受信サイクル期間Tに沿って、追加のトラフィックを平均化している。
Figure JPOXMLDOC01-appb-I000001
 既に与えられている平均帯域幅BWswitch_avgの値に対して、超過帯域幅となるより多くの追加トラフィックを処理するためには、式(7)から明らかなように、追加されるアイドルタイムスロットの数Sを増やす必要がある。
 アイドルタイムスロットを追加する場合、拡張された受信サイクル期間TEXTENDが延びることで、ネットワーク全体の動作サイクルに遅延が追加されるため好ましくない。次に、別の視点から、ASICスイッチの平均帯域幅BWswitch_avgを「縮小された帯域幅」とするときに、平均を超える入力トラフィックを処理する解決法が提案される。
[メインスイッチに補助スイッチを追加した修正された構成]
 再び図13の(b)の下側の図を参照すると、係数Fで帯域幅を制限されたASICスイッチで、平均を超える入力トラフィックを処理するもう第2の解決法の概念を示している。第2の解決法では、係数Fを導入して、ASICスイッチの平均帯域幅BWswitch_avgを「縮小された帯域幅」とする場合、ASICスイッチで平均を超える入力トラフィックを処理するために、メインのASICスイッチに加えて補助スイッチ27を備える。第1の解決法のような時間軸へのアプローチではなくて、異なる機能のメインスイッチおよび補助スイッチ27を備え、スイッチングの動作を修正するアプローチである。メインスイッチは、その時々の最高技術水準の性能を持つ高速のスイッチとする一方、補助スイッチ27は、後述するように帯域幅がメインスイッチより狭く、より低速のスイッチを利用することができる。
 図16は、係数Fの導入に伴い修正されたASICスイッチの構成を説明する図である。図16は、修正された構成のASICスイッチを持つ受信ノード40を示しており、図4および図9に示した本開示によるDCネットワークの基本構成の受信ノードの構成と同一である。すなわち、ノードのフロント部において1つのグループ内のノード数m個のAWG43を備え、対応する受信機44を備える。ノード40は、メインスイッチ41に加えて、補助スイッチ42を備えている。メインスイッチ41は、図4および図9の基本構成の受信ノードと同じく、高速で広帯域のASICスイッチであって、係数Fで縮小された平均帯域幅BWswitch_avgの処理を担う。一方、補助スイッチ42は、メインスイッチ41の帯域幅に対して1/qに設定された狭い帯域幅を有する低速のスイッチである。メインスイッチ41は、図6および図8で説明したタイムスロット方式によって、時間的な制限のもとで動作するが、補助スイッチ42は、受信サイクル期間Tの全体にわたって、時間的な制限なしに使用できる。メインスイッチ41および補助スイッチ42は、図16には示していないノードの制御部によって制御され、異なる帯域幅を持つ2つのスイッチが協働して動作する。
 したがって本開示の光ネットワークは、フルメッシュネットワーク構成を有する光コア部と、前記光コア部に接続された複数のノードであって、複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれている、複数のノードとを備えた光ネットワークであって、前記複数のノードの各々は、複数のタイムスロットを含む受信サイクル期間において、ソースノードが属するグループに関連付けられたタイムスロットにおいてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定され、前記最大m個のノードから受信された光信号に対応する電気信号をスイッチングし、複数のサーバーへルーティングするASICスイッチであって、前記複数のノードの平均着信トラフィックに対応するスイッチング容量を有し、前記タイムスロットに同期して動作するメインスイッチ41、および、前記平均着信トラフィックを越えるトラフィックを処理可能なスイッチング容量を有し、前記タイムスロットに関係なく動作する補助スイッチ42を有するものとしても実施できる。
 補助スイッチ42は、時間的な制限を受けずに、受信サイクル期間Tにわたって使用することができるので、補助スイッチによって処理できる最大の追加のトラフィックは、以下のように求められる。1つの受信サイクル期間Tの各タイムスロットにおける入力帯域幅を、BWとする。ASICスイッチに到来するトラフィックは、タイムスロット毎に変化し、BWと平均帯域幅BWswitch_avgとの間の差を、ΔBWと表す。また受信サイクル期間Tにおけるタイムスロットの数をdとする(タイムスロットの数dは、ノードのグループ数にも対応する)。図16の修正された構成のASICスイッチによる最大の追加のトラフィックは、次式の制限を受ける。
Figure JPOXMLDOC01-appb-I000002
式(8)から、受信サイクル期間T内の追加のトラフィックΔBWは、右辺の係数d/qによってむしろ強化され、例えばq=4およびd=16とすると、d/q=4の拡張係数が実現される。アイドル時間の追加によって受信サイクル期間Tを拡張した第1の解決法における式(7)と比較すれば、アイドルタイムスロットを追加することなしに、平均帯域幅を超える入力トラフィックを処理できる。係数Fで「縮小された帯域幅」で動作するASICスイッチの構成をさらに修正することで、第1の解決法での遅延問題を生じさせずに、平均を超える入力トラフィックを処理可能となり、超過帯域幅の量を強化することさえ可能である。
 上述のSAICスイッチの修正された構成による第2の解決法と、先に述べた受信サイクル期間Tを拡張する第1の解決法を組み合わせることも可能である。すなわち、図15のアイドリングタイムスロットを追加した拡張した受信サイクル期間を備え、かつ、図16に示した異なる帯域幅を持つ2つのスイッチ41、42を備えることができる。このとき、ネットワークのノードの各々は、複数のタイムスロットに引き続く1つ以上のアイドルタイムスロットにおいては、どのソースノードからも光信号を受信せず、平均着信トラフィックを越えたトラフィックを処理する。同時に、補助スイッチ42は、複数のタイムスロットおよび1つ以上のアイドルタイムスロットの全期間を通して、平均着信トラフィックを越えたトラフィックを処理することになる。
[補助スイッチでスイッチング後のキューイング時間最小化]
 上述の図16の修正されたASICスイッチの構成による第2の解決法では、補助スイッチの経路を通過するトラヒックが遭遇する待ち時間(遅延)の原因を、2つに分けることができる。第1の原因は、補助スイッチ42の狭い帯域幅による長い物理的スイッチング時間に起因する待ち時間である。第2の原因はトップオブラック (ToR)スイッチ45への送信が完了するまでの待ち行列のための余分な待ち時間に起因する待ち時間である。以下では、図16の第2の解決法に対してさらに修正を加えて、補助スイッチ42に起因するこれらの遅延に対処する構成を提案する。
 図17は、修正されたASICスイッチの遅延を軽減するノードの構成図である。図17の修正されたASICスイッチを持つ受信ノード50、図16で説明した受信ノード40と概ね同一構成なので、相違点のみについて説明する。補助スイッチ52におけるキュー55は、図16の受信ノード40にも含まれており、上述の第2の理由の遅延における待ち行列に相当する。図17の受信ノード50では、補助スイッチ52とToRスイッチ57との間を、光リンクとして実現可能な伝送容量の大きいリンク56を介して接続する。図17の構成によって、1つのタイムスロット内に蓄積されたデータを目的のToRスイッチに伝送するのに十分な容量をサポートし、修正されたASICスイッチでの遅延を減らすことができる。
 以上、詳細に述べてきたように、本開示の光ネットワークにより、DCネットワークの周辺部におけるノードの構成を簡略化し、消費電力を減らすことができる。ASICスイッチの抱えていた問題を解決または少なくとも軽減し、光ネットワークの大規模化、低消費電力化にも対応できる。さらに、ASICスイッチの様々な限界に対応して、ネットワークトラフィック需要や現実的なASICスイッチの技術進歩に柔軟に適合するスケーラビリティを実現する。
 本発明は、一般的に光通信システムに利用することができる。

Claims (6)

  1.  フルメッシュネットワーク構成を有する光コア部と、
     前記光コア部に接続された複数のノードであって、複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれている、複数のノードと
     を備えた光ネットワークであって、
     前記複数のノードの各々は、
      前記最大m個のノードから受信された光信号に対応する電気信号をスイッチングし、複数のサーバーへルーティングするASICスイッチであって、前記複数のノードの平均着信トラフィックに対応するスイッチング容量を有するASICスイッチを有し、
      複数のタイムスロットを含む受信サイクル期間において、ソースノードが属するグループに関連付けられたタイムスロットにおいてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定され、
      前記複数のタイムスロットに引き続く1つ以上のアイドルタイムスロットにおいて、前記ソースノードのいずれからも光信号を受信せず、前記平均着信トラフィックを越えるトラフィックを処理すること
     を特徴とする光ネットワーク。
  2.  フルメッシュネットワーク構成を有する光コア部と、
     前記光コア部に接続された複数のノードであって、複数のグループに分割されており、1つのグループ内に最大m個のノードが含まれている、複数のノードと
     を備えた光ネットワークであって、
     前記複数のノードの各々は、
     複数のタイムスロットを含む受信サイクル期間において、ソースノードが属するグループに関連付けられたタイムスロットにおいてのみ、前記ソースノードが属する前記グループ内の任意のノードによってアドレス指定され、
     前記最大m個のノードから受信された光信号に対応する電気信号をスイッチングし、複数のサーバーへルーティングするASICスイッチであって、
      前記複数のノードの平均着信トラフィックに対応するスイッチング容量を有し、前記タイムスロットに同期して動作するメインスイッチ、および、
      前記平均着信トラフィックを越えるトラフィックを処理可能なスイッチング容量を有し、前記タイムスロットに関係なく動作する補助スイッチ
    を有することを特徴とする光ネットワーク。
  3.  前記複数のノードの各々は、
     前記複数のタイムスロットに引き続く1つ以上のアイドルタイムスロットにおいて、いずれの前記ソースノードからも光信号を受信せず、前記平均着信トラフィックを越えるトラフィックを処理し、
     前記補助スイッチは、前記複数のタイムスロットおよび前記1つ以上のアイドルタイムスロットの全期間を通して、前記平均着信トラフィックを越えるトラフィックを処理することを特徴とする請求項2に記載の光ネットワーク。
  4.  前記複数のノードの各々は、前記補助スイッチと、前記複数のサーバーを含むトップオブラックスイッチとを接続する追加の光リンクをさらに有することを特徴とする請求項2または3に記載の光ネットワーク。
  5.  前記複数のノードの各々は、
      m個のアレイ導波路回折格子(AWG)であって、当該AWGの複数の入力ポートは同一のグループに属する前記最大m個のノードから対応する光信号を受信し、前記複数の入力ポートの動作波長に適合するように、前記最大m個のノードの内の1つ以上のソースノードの使用波長が設定されている、AWGと、
      前記AWGの出力合波ポートに接続されたm個の受信機と、
      前記スイッチング容量を超えるトラフィックを記憶して処理する記憶媒体と
     をさらに有することを特徴とする請求項1乃至4いずれかに記載の光ネットワーク。
  6.  前記複数のノードの各々への最大着信帯域幅BWin_maxとして、
     前記ASICスイッチは、係数F(0<F<1)によって縮小された帯域幅であって、前記平均着信トラフィックに対応する平均帯域幅BWswitch_avg=F×BWin_maxが割り当てられることを特徴とする請求項1乃至5いずれかに記載の光ネットワーク。
PCT/JP2021/006454 2021-02-19 2021-02-19 タイムスロット化した受信を使用する光ネットワークおよびノード WO2022176172A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/JP2021/006454 WO2022176172A1 (ja) 2021-02-19 2021-02-19 タイムスロット化した受信を使用する光ネットワークおよびノード
US18/262,046 US20240089641A1 (en) 2021-02-19 2021-02-19 Optical Network and Node Using Timeslotted Reception
JP2023500471A JPWO2022176172A1 (ja) 2021-02-19 2021-02-19

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2021/006454 WO2022176172A1 (ja) 2021-02-19 2021-02-19 タイムスロット化した受信を使用する光ネットワークおよびノード

Publications (1)

Publication Number Publication Date
WO2022176172A1 true WO2022176172A1 (ja) 2022-08-25

Family

ID=82930408

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/006454 WO2022176172A1 (ja) 2021-02-19 2021-02-19 タイムスロット化した受信を使用する光ネットワークおよびノード

Country Status (3)

Country Link
US (1) US20240089641A1 (ja)
JP (1) JPWO2022176172A1 (ja)
WO (1) WO2022176172A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150181317A1 (en) * 2013-12-24 2015-06-25 Nec Laboratories America, Inc. Scalable hybrid packet/circuit switching network architecture
US20150312659A1 (en) * 2014-04-25 2015-10-29 Futurewei Technologies, Inc. System and Method for Photonic Switching
US20160277816A1 (en) * 2015-03-20 2016-09-22 National Chiao Tung University Optical data center network system and optical switch
JP2019216417A (ja) * 2018-06-11 2019-12-19 台達電子工業股▲ふん▼有限公司Delta Electronics,Inc. 知恵定義光トンネルネットワークシステムとネットワークシステム制御方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150181317A1 (en) * 2013-12-24 2015-06-25 Nec Laboratories America, Inc. Scalable hybrid packet/circuit switching network architecture
US20150312659A1 (en) * 2014-04-25 2015-10-29 Futurewei Technologies, Inc. System and Method for Photonic Switching
US20160277816A1 (en) * 2015-03-20 2016-09-22 National Chiao Tung University Optical data center network system and optical switch
JP2019216417A (ja) * 2018-06-11 2019-12-19 台達電子工業股▲ふん▼有限公司Delta Electronics,Inc. 知恵定義光トンネルネットワークシステムとネットワークシステム制御方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
CLARK KARI; BALLANI HITESH; BAYVEL POLINA; CLETHEROE DANIEL; GERARD THOMAS; HALLER ISTVAN; JOZWIK KRZYSZTOF; SHI KAI; THOMSEN BENN: "Sub-Nanosecond Clock and Data Recovery in an Optically-Switched Data Centre Network", 2018 EUROPEAN CONFERENCE ON OPTICAL COMMUNICATION (ECOC), IEEE, 23 September 2018 (2018-09-23), pages 1 - 3, XP033447614, DOI: 10.1109/ECOC.2018.8535333 *

Also Published As

Publication number Publication date
JPWO2022176172A1 (ja) 2022-08-25
US20240089641A1 (en) 2024-03-14

Similar Documents

Publication Publication Date Title
Lu et al. Flexible and scalable optical interconnects for data centers: Trends and challenges
US9848254B2 (en) Efficient transport network architecture for content delivery network
Kamchevska et al. Experimental demonstration of multidimensional switching nodes for all-optical data center networks
US11102110B2 (en) Data center network (DCN) architecture and communication
Xue et al. Flexibility assessment of the reconfigurable OPSquare for virtualized data center networks under realistic traffics
US8358932B2 (en) All-optical data center network
JP7307388B2 (ja) 光コア部を有する光ネットワーク、タイムスロット化した受信を使用するノード
CN100428660C (zh) 一种具有内部加速的光突发交换节点
Liu et al. Space-frequency joint contention scheduling algorithm based on AoD in SDM-EONs
Wu et al. Joint scheduling and routing for QoS guaranteed packet transmission in energy efficient reconfigurable WDM mesh networks
Christodoulopoulos et al. Efficient bandwidth allocation in the NEPHELE optical/electrical datacenter interconnect
WO2022176172A1 (ja) タイムスロット化した受信を使用する光ネットワークおよびノード
Chen et al. Optimized parallel transmission in otn/wdm networks to support high-speed ethernet with multiple lane distribution
Yang et al. An optical interconnect network design for dynamically composable data centers
Stavdas et al. Dynamic CANON: A scalable multidomain core network
Drainakis et al. Scalable and low server-to-server latency data center network architecture based on optical packet inter-rack and intra-rack switching
Shukla et al. Optical switching in next-generation data centers: Architectures based on optical switching
Karthi et al. WMRD net: An optical data center interconnect
Baziana Asynchronous Transmission Strategy and Optical IntraCluster Connectivity for Hyperscale Data Centers
Jin et al. Sandwich Tree: A new datacenter network based on passive optical devices
Yu et al. Enhancing performance of cloud computing data center networks by hybrid switching architecture
Zhang et al. PROPH: A Contention-free and Elastic Bandwidth Scheduling Scheme for AWGR-based Optical DCN
Baziana et al. A Scalable Optical Intra-Cluster Data Center Network with an Efficient WDMA protocol: Performance and Power Consumption Study
Zhao et al. Minimizing delay by multi-hop routing and scheduling in clos networks for DCNs
Drainakis et al. Optical Intra-and Inter-Rack Switching Architecture for Scalable, Low-Latency Data Center Networks

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21926605

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2023500471

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 18262046

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21926605

Country of ref document: EP

Kind code of ref document: A1