Redundant BGP- en datacenternetwerk voor een hosting- en cloudprovider
Een hosting- en cloudprovider draait zijn platform vanuit datacenters in Amsterdam en Frankfurt. 020 ICT werkt sinds 2022 aan het BGP- en datacenternetwerk: redundante upstreams, een M-LAG-switchpaar in Frankfurt en een gecontroleerde migratie naar een nieuw eigen AS-nummer.
- Opdrachtgever
- Hosting- en cloudprovider (naam niet genoemd)
- Periode
- 2022 – heden
- Rol
- Netwerkengineer en consultant; in 2023 wekelijks overleg, daarna stand-by-support
- Techniek
- eBGP en iBGP (IPv4 en IPv6), prefixfilters, MikroTik CRS326 in M-LAG (40G-peerlink, LACP), firewall-HA, tunnels
Situatie
De provider heeft datacenterlocaties in Amsterdam en Frankfurt en een kantoor. Klanten verwachten dat hun diensten bereikbaar blijven, ook als een upstream, een router of een switch uitvalt. Het netwerk moest daarom op elk niveau dubbel zijn uitgevoerd, en wijzigingen in de routering moesten zonder onderbreking kunnen worden doorgevoerd.
Aanpak
Per datacenter heeft de provider eBGP-sessies naar de upstream, voor IPv4 en IPv6, met prefixfilters zodat alleen de bedoelde routes worden aangekondigd en geaccepteerd. Amsterdam en Frankfurt zijn via iBGP over een tunnel met elkaar verbonden. In Frankfurt staan twee MikroTik CRS326-switches in M-LAG, met een 40G-peerlink en LACP naar de aangesloten apparatuur. De edge-routers en de firewalls (in HA) zijn dubbel aangesloten, zodat een switch kan uitvallen zonder dat het verkeer stopt.
In 2023 is het netwerk gemigreerd naar een nieuw eigen AS-nummer. De nieuwe sessies zijn eerst opgebouwd en gecontroleerd, daarna zijn de oude sessies gecontroleerd afgebouwd. Een wijziging van het upstream-AS in Frankfurt (december 2024) is bewust buiten de jaarlijkse change-freeze ingepland. Het kantoor is via een tunnel op het datacenternetwerk aangesloten en heeft twee internetlijnen. In 2023 was er wekelijks overleg; daarna levert 020 ICT stand-by-support.
Wat er is gebouwd
- eBGP-sessies naar de upstream per datacenter, voor IPv4 en IPv6, met prefixfilters.
- iBGP tussen Amsterdam en Frankfurt over een tunnel.
- In Frankfurt twee MikroTik CRS326-switches in M-LAG, met een 40G-peerlink en LACP.
- Dubbel aangesloten edge-routers en firewalls in HA op het switchpaar.
- Een migratie naar een nieuw eigen AS-nummer (2023), met gecontroleerde afbouw van de oude sessies.
- Een wijziging van het upstream-AS in Frankfurt (december 2024), ingepland buiten de jaarlijkse change-freeze.
- Een kantoor met twee internetlijnen, via een tunnel aangesloten op het datacenternetwerk.
Resultaat
- In Frankfurt is het netwerk op elk niveau dubbel uitgevoerd: upstream, edge-router, switch en firewall.
- De provider routeert onder een eigen AS-nummer, en de overgang daarnaartoe verliep gecontroleerd.
- Wijzigingen in de routering worden gepland rond de change-freeze, en de provider kan terugvallen op stand-by-support van 020 ICT.
Wat dit voor u betekent
Draait u een hosting- of cloudplatform en moet uw netwerk blijven werken als een upstream of switch uitvalt? 020 ICT ontwerpt en onderhoudt redundante BGP- en datacenternetwerken, en begeleidt wijzigingen als een AS-migratie of een nieuwe upstream zonder onderbreking.
Meer over deze dienst: BGP en ISP-netwerken