Superfunktion från Cloudflare AI bot block för alla

Superfunktion från Cloudflare AI bot block för alla

Cloudflare har lanserat en ny funktion som gör det möjligt för användare att enkelt blockera AI-botar med ett enda klick. Denna funktion är tillgänglig för alla kunder, även de som använder gratisversionen. Målet är att skydda innehållsskapare från att få sitt material utnyttjat utan tillstånd av AI-företag som använder webbskrapningstekniker.

Växande problem med AI-botar

Den ökande populariteten av generativ AI har lett till en stor efterfrågan på innehåll för att träna modeller och köra inferens. Dock är inte alla AI-företag transparenta med sin verksamhet. Google har till exempel betalat 60 miljoner dollar per år för att licensiera användargenererat innehåll från Reddit, medan Scarlett Johansson har anklagat OpenAI för att ha använt hennes röst utan tillstånd. Senast har Perplexity anklagats för att imitera legitima besökare för att skrapa innehåll från webbplatser. Detta visar på vikten av att skydda originalinnehåll.

Hur den nya funktionen fungerar

För att aktivera blockeringen, navigera till fliken ”Security > Bots” i Cloudflare-dashbordet och slå på reglaget märkt ”AI Scrapers and Crawlers”. Funktionen kommer att uppdateras automatiskt när nya fingeravtryck från skadliga AI-botar identifieras.

Nuvarande aktivitet från AI-botar

Data från Cloudflare visar att Bytespider, Amazonbot, ClaudeBot och GPTBot är de mest aktiva AI-botarna. Bytespider, som drivs av ByteDance, används för att samla in träningsdata för deras stora språkmodeller. Amazonbot används för att indexera innehåll för Alexa, medan ClaudeBot används för att träna Claude chat bot. GPTBot, hanterat av OpenAI, samlar in träningsdata för produkter som ChatGPT.

Identifiering och blockering av falska webbläsare

Cloudflare har upptäckt att vissa botoperatörer försöker dölja sin verksamhet genom att använda förfalskade användaragentsträngar. Genom avancerade maskininlärningsmodeller kan Cloudflare identifiera dessa bedrägliga aktiviteter och blockera dem effektivt. Kunder som redan har WAF-regler på plats för att utmana besökare med låga botpoäng blockerar automatiskt denna typ av trafik.