Slik håndterer man 100 millioner gigabyte data

Hardware.no/Genève: Flere hundre millioner ganger hvert eneste sekund kan ørsmå partikler frontkollidere med tilnærmet lysets hastighet i Large Hadron Collider – det gigantiske partikkeleksperimentet som ligger på grensen mellom Frankrike og Sveits, hos Cern. Hver og en av disse kollisjonene skaper mindre partikler som igjen kan bryte ned til enda flere partikler. På de fire punktene i LHC der disse kollisjonene finner sted, står det plassert flere gigantiske detektorer som måler denne nedbrytningen, ved å fange et bilde av hvordan partiklene beveger seg gjennom en serie med forskjellige instrumenter.

– Datautfordringen for LHC er at vi har disse fire store eksperimentene som produserer ufattelig store datamengder når vi kjører kollisjoner i akseleratoren, slår Nils Høimyr fast. Han er seksjonssjef i Cerns IT-avdeling, avdelingen som har ansvaret for å håndtere disse ubegripelig store datamengdene.

Disse dataene, som beskriver hvordan hver eneste lille partikkel fra hver eneste av de gjerne 600 millioner kollisjonene i sekundet, skal filtreres, lagres og analyseres – og de siste to punktene er en massiv utfordring å få til. Når LHC jobber på full spiker, kan det samle seg opp over 30 petabyte med verdifull rådata i året – og alt dette skal analyseres ned til minste detalj. Datamengende det er snakk om her, og prosessorkraften som må til, er av en skala det er vanskelig å fatte. Men takket være et et intrikat nettverk av flere hundre regnesentere rundt om på hele jordkloden, har Cern fått det til.