Lagde uendelig nettside for å trolle Meta

Mens Meta skaper nettet for treningsdata til KI-en sin, foret Bruce Ediger dem med uendelig tilgang til søppel-data.

Det melder Slashdot, som har fanget opp saken på utviklerens egen blogg.

− Innsatsen viser hva en enkel Linux-fyr kan få til. Hvis mange drev skrape-feller og skrotplasser, ville det tvinge Facebook til å oppføre seg ordentlig, skriver Ediger i bloggen.

− Ødelegger nettet

KI-botene og crawlere har invadert internett, til lite glede for innholdsskapere. Praksisen har møtt krav om betaling for innholdet.

Utvikler og teknologiforfatter Gergely Orosz er blant flere som har advart mot hensynsløs «

skraping

» av innhold på internett. Det er kopiering eller maskinell nedlasting av tekst og filer.

Tradisjonelt er dette indeksering av søkemotorer, men i økende grad også chatboter, samt KI-aktørenes innhøsting av enorme mengder innhold for å utvikle store språkmodeller.

− KI-skraping ødelegger internett, sa Orosz på Bluesky tidligere i år.

Han er ikke alene om å bære nag til KI-skraperne, som ikke betaler en krone for data til å trene egne modeller.

Fem måneder

Tidligere i år oppdaget Ediger en nett-skraper som var uforholdsmessig ofte innom nettsiden hans. Skraperen viste seg å komme fra Meta, og Ediger fant at det er nettopp den Meta bruker til å hente innhold til å trene sin egen store språkmodell (LLM).

Da bestemte han seg for å lede boten ned et kanilhull av ubrukelig, syntetiske data. Han hadde nemlig allerede satt opp et program for å lage illusjonen av en uendelig nettside.

Når skraperen fra Meta banket på nettside-døra, svarte han den med en generert HTML-fil med lenker.

Trafikken Meta genererte var voldsom.

− Etter omtrent tre måneder ble jeg redd for at Metas umettelige forbruk av Supergode Sider om tilbehør, undertøy og C-kjendiser fra rundt 2010 skulle begynne å koste meg penger. Så jeg byttet til å gi «meta-externalagent» en 404-statuskode, skriver Ediger.

Han ville se hvor lang tid det tok før et av verdens største teknologiselskaper sluttet å skrape sidene.

− Svaret er fem måneder, skriver Ediger, som mener vi alle burde fore Metas KI-skraper med søppel.