Mystore med 1700 norske nettbutikker rammet av nedetid og tekniske problemer

Mystore opplevde ustabilitet og en mystisk trafikk på sin skybaserte plattform, som drifter om lag 1700 norske nettbutikker.

Det var litt før klokken 13.30 tirsdag at det oppsto en situasjon med det daglig leder Lars Jakobsen kaller en avvikende belastning i systemet.

– Vi begynte å få ustabilitet i tjenestene våre. Først og fremst på webtjenestene, herunder nettbutikker og kundenes kontrollpanel. Det eskalerte ganske fort. Ti minutter senere satte vi «war room» og krisestab, forteller Jakobsen til Digi.no.

Jakter rotårsak

Forløpet ligner ikke noe de har opplevd teknisk tidligere. Det er ennå uvisst hva som utløste problemene, men ustabiliteten vedvarte i rundt fire timer.

Nettbutikkene de drifter for små- og mellomstore kunder har i denne perioden sporadisk opplevd både treghet og nedetid.

Det å stenge kontrollpanelet for kundene, rett over nyttår mens mange driver varetelling, var en tung beslutning, røper Mystore-sjefen.

– Vi har brukt en del tid på å grave i det, men fikk ganske raskt opp tjenestene, om enn med litt begrenset funksjonalitet. Det ble lite nedetid for nettbutikkene, men noen begrensninger i hva butikkansatte kan gjøre i kontrollpanelet.

Statussiden oppgir at tjenestene ble friskmeldt først ved 21-tiden.

– Tjenestene var stabile allerede fra kvart over fire, men vi valgte å holde saken åpen til vi visste at vi har full kontroll, utdyper Jakobsen.

Utelukker ikke angrep

Årsaken til problemene er ennå ikke kjent. Mystore undersøker både med egne teknikere og ekstern bistand.

– Vi har ikke rotårsaken ennå. En av tingene det kan ha vært er et angrep, men vi har ikke fått data som bekrefter det. Det er en av årsakene vi fortsetter å undersøke.

I kundedialogen har leverandøren oppgitt «uvanlig stor trafikk» og store trafikkmengder som årsak til at de tirsdag måtte gjøre tiltak.

– Det er kanskje litt upresist. La oss kalle det en annen type trafikk eller et annet mønster. Under «black friday» og «black week» har vi mye større trafikk, uten at det skaper utfordringer, sier Lars Jakobsen.

Han ønsker ikke å gå nærmere inn på tekniske detaljer, men han tror ikke at Mystore ble rammet av et tjenestenektangrep (DDoS). Det underbygges ved at Mystore heller ikke har gjort noe i denne sammenheng for å blokkere IP-trafikk, for eksempel.

Tas på alvor

Jakobsen sier at de ikke har noen rådende teori om hva som skjedde. De utreder nå flere mulige rotårsaker.

– Hvis dette har vært en sikkerhetshendelse, så kommer vi til å dele mer informasjon om det senere.

Mystore har ifølge ham egne devops-ressurser og beredskapsplaner, som inkluderer mange slags tiltak ved driftsutfordringer.

– Alle våre tjenester kjører i skyen. Vi har en vel utprøvd og god stabilitet i plattformen vår, som vi har jobbet godt med i mange år. Hendelsen er noe vi tar veldig på alvor. Vi vil gjøre et grundig arbeid for å komme til bunns i det som skjedde.

Nettbutikkene de drifter er kundenes livsverk.

– Det er med andakt vi tar det ansvaret. Kundene skal vite at vi alltid har fokus på å holde butikkene i gang. De kan være trygge på at vi gjør alt vi kan, sier Jakobsen.