Cloudflare sier at AI-startupen Perplexity har crawlet nettsteder som uttrykkelig blokkerte scraping.
Ifølge Cloudflare ignorerte Perplexity blokkeringer og skjulte crawling ved å endre user agent og skifte autonome system‑nettverk (ASN). Aktiviteten ble observert på titusenvis av domener og millioner av forespørsler per dag; Cloudflare sier de fingerprintet crawleren med maskinlæring og nettverkssignaler. Selskapet fjernet Perplexitys roboter fra sin verifiserte liste og innførte nye blokkingsteknikker.
Perplexitys talsmann Jesse Dwyer kalte Cloudflares innlegg et «sales pitch», hevdet at skjermbildene viser at intet innhold ble hentet, og senere at den navngitte boten ikke er deres. Cloudflare har også lansert verktøy og en markedsplass for at utgivere kan ta betalt av AI‑skrapere. Saken berører norske nettsteder og mediehus; norske aktører kan påvirkes av tiltak mot scraping innen kunstlig intelligens (KI). I AI-nyheter er dette en vesentlig problemstilling.
Kilde: https://techcrunch.com/2025/08/04/perplexity-accused-of-scraping-websites-that-explicitly-blocked-ai-scraping/ | Sammendraget er KI-generert med OpenAI API av Ainy.no