Analyserer feil for å unngå trøbbel under Norges første VM-kamp

En teknisk feil hos Altibox' datasenter førte søndag kveld til TV-problemer for en rekke seere under VM-kampen mellom Tyskland og Curaçao.

Feilen skapte uvanlig høy trafikk mot krypteringsløsningen Altibox bruker for TV-innhold. Det gjorde at TV-tjenesten ble påvirket for flere kunder.

– Det var en feil i vårt datasenter på et såkalt linjekort. Det førte til en veldig stor trafikkmengde mot krypteringsløsningen, som vi er lovpålagt å ha på TV-innholdet. Det gjorde at den fikk problemer. Så det var et sammensatt problem, sier kommunikasjonssjef Andreas Veggeland i Altibox.

Feilen hadde sitt utgangspunkt hos Altibox, men også underleverandører var involvert i feilrettingen.

– Det er vi som leverer TV-tjenesten, så det er vi som har ansvaret, sier Veggeland.

For Altibox kan det kanskje sies at det var et lykketreff at feilen ikke oppsto natt til onsdag, når Norge spiller sin første VM-kamp mot Irak. Altibox analyserer nå hendelsen for å hindre at det samme skjer igjen.

– Vi gjør alt vi kan for å sikre at det ikke skal skje. Det som skjedde, var en litt sånn «perfect storm», sier Veggeland.

Svarte skjermer når Norges herrelandslag jager scoring på tampen av en kamp under sitt første VM siden 1998, er neppe et scenario seerne eller TV-distributørene ønsker seg.

Ingen unntakstilstand

Det var også tema da Digi møtte Altibox og Lyse-eide Bergen Fiber for å høre om hvordan de forbereder seg på å sikre store direktesendinger under VM.

Bergen Fiber leverer fiber til 71.000 kunder i Bergen og Hordaland nord for Hardangerfjorden. Rundt 72 prosent av disse får TV levert gjennom Altibox.

VM er ingen unntakstilstand for leverandørene, men under mesterskapet reduseres risikoen for selvpåførte feil ved å legge større endringer og justeringer på is.

– Vi har innført frysperiode. Vi kommer ikke til å gjøre noen større justeringer eller endringer, bare for å minimere risikoen for at feil skal skje i det som vi vet er en veldig viktig periode for norske TV-seere, sier Veggeland.

Hos Bergen Fiber har de et eget beredskapsrom hvor beredskapsteamet samles om en større hendelse skulle oppstå. Hva som så skal skje, står i beredskapsplanen. Den finnes digitalt, og i en rød perm administrerende direktør Tore Nyhammer holder opp.

– Hvis det skulle skje noe, så kan vi likevel møtes og opprette beredskap, sier Nyhammer.

Han understreker at tekniske systemer aldri kan gjøres helt feilfrie.

– Innenfor teknikkens verden har du aldri noen garanti, sier Nyhammer.

Feil kan oppstå flere steder

TV-bildet skal gjennom en lang kjede før det ender opp hjemme i stua til abonnentene. Søndagens feil viser at problemet ikke nødvendigvis ligger i selve fiberforbindelsen.

Feil kan oppstå i datasentre, TV-plattformen, krypteringsløsninger, apper, dekodere, kundens hjemmenett eller andre deler av kjeden.

– Feil kan skje på mange forskjellige steder i verdikjeden. Nå var det dessverre en feil som hadde sitt grunnlag hos oss, og som påvirket videre i verdikjeden, sier Veggeland.

Altibox viste samtidig til at kundene kunne bruke kringkasternes egne apper som alternativ.

Veggeland sier det også kan være motsatt ved andre feil. Hvis en app feiler, kan det hende at dekoder eller en annen distribusjonsvei fortsatt fungerer.

Redundans i nettet

Bergen Fiber og Altibox skiller mellom feil i TV-tjenesten og feil i selve transportnettet. Skjer det kabelbrudd i fibernettet, er det som regel redundans, og trafikken kan rutes andre veier.

Det ble løsningen da et godstog sporet av ved Arna stasjon i 2024 og rev med seg en rekke fiberkabler.

– Ødelegges en transportkabel, så har vi jo sannsynligvis redundans for den, sier Nyhammer.

En annen risiko er strømbrudd. Bergen Fibers noder i nettet er utstyrt med redundante løsninger og batteribackup. Noen større noder har aggregatløsninger.

Batteribackupen betyr at deler av nettet kan fortsette å gå ved strømbrudd, men kunden er fortsatt avhengig av strøm til hjemmesentral, ruter og TV.

Flere veier til kamp

Søndagens hendelse viser at TV ikke lenger er én distribusjonsvei. Har du dekoder fra TV-leverandøren, distribueres sendingen med multicast. Da sendes TV-strømmer langt ut i nettet, og dekoderne plukker opp disse strømmene.

Strømming via app fungerer annerledes. Da henter hver bruker sin egen sending.

Det kan gi forskjeller i forsinkelse. Via dekoder kan forsinkelsen fra USA til TV-en være et par sekunder. Via web kan den være opp mot minuttet.

Det kan du kanskje merke hjemme i stua. Å se via app kan innebære en viss fare for spoilers.

Om du hører naboene juble uten at du har sett noe mål, kan forklaringen være at de ser via multicast mens du ser via strømming.

Ulike distribusjonsveier kan være reserveløsninger når en av distribusjonsveiene feiler.

Veggeland og Nyhammer vil ikke si om fysiske tiltak i nettet har vært en del av VM-oppkjøringen for Altibox. De trekker frem at de har beredskapsplaner, rutiner og et nett som i utgangspunktet skal ha lav risiko for feil.

– Vi er opptatt av gode beredskapsplaner, men også gode rutiner for den vanlige driften. Og at vi har bygget et solid grunnlag som gjør at risikoen for feil er lav i utgangspunktet, sier Veggeland.