Konfigurationsfejl sender hostingfirmaet Fuzion offline - igen

En menneskelig fejl gav fredag eftermiddag hostingfirmaet Fuzion en ny ridse i lakken. I lidt over en halv time var al forbindelse til og fra firmaet helt død, hvilket gik ud over hosting-kunder som Travelmarket.dk, Saxo Bank og Altinget.dk.

»Al vores interne datatrafik fungerede fint, men fejlen gik ud over al vores kommunikation med omverden,« forklarer direktør Morten Klank.

Problemet opstod efter en opgradering af routerne, der blev sat i værk efter det 5,5 timer lange nedbrud i maj, som skyldtes softwareproblemer med routerne. Én af de udrangerede routere stod stadig koblet netværket, men havde på papiret ingen funktion og blev fredag slukket.

Desværre viste det sig, at en fejl i konfigurationen betød, at netværket stadig var afhængigt af denne router. Da den bliver slukket, slukkes forbindelsen fuldstændigt ind og ud af Fuzion.

»I forbindelse med dette arbejde bemærker teknikeren ikke en fejl i konfiguration på BGP Border-routere, som gør, at denne gamle router besidder nogle BGP-informationer, der benyttes af begge BGP Border Routere. Helt konkret betyder dette, at da teknikeren slukker den gamle router, stopper BGP Border Routerne med at annoncere IP-adresser til alle vores peers og transit partnere,« skriver Fuzion i redegørelsen.

»Der er simpelthen lavet en fejl i konfigurationen, så de nyere routere var afhængige af den gamle. Det er meget svært at gardere sig mod den slags menneskelige fejl,« siger Morten Klank, der nu vil prøve at stramme op, så den slags ændringer altid dobbelttjekkes.

At alting virkede fint internt, gjorde det også svært at finde fejlen umiddelbart, fortæller han.

Nedbruddet gik ikke kun ud over datatrafikken til og fra serverne hos Fuzion, men lammede også hovedtelefonnummeret hos Fuzion. Kunder fik dog en advarsel per SMS og kunne ringe ind på det nødnummer, de har, fortæller direktøren.

At nedbruddet kommer i arbejdstiden, og mens kunderne stadig har maj-nedbruddet i frisk erindring, er ikke godt for Fuzion, lyder vurderingen.

»Det har store konsekvenser for os økonomisk. Både i direkte kompensation, men også i forhold til vores image,« siger Morten Klank, der dog ikke har haft kunder i røret, som ønsker at droppe Fuzion.