Cloudflare sier Perplexity crawlet og skrapet nettsteder som uttrykkelig hadde blokkert AI-scraping.
Ifølge Cloudflare publiserte de mandag forskning som viser at Perplexity angivelig ignorerte robots.txt-blokker og skjulte crawling ved å endre user agent og autonome systemnummer (ASN), og brukte en generisk nettleser som etterlignet Google Chrome på macOS når den deklarerte crawl-en ble blokkert. Aktiviteten ble observert på titusenvis av domener og millioner av forespørsler per dag; Cloudflare sier de fingerprintet crawlere med maskinlæring og nettverkssignaler. Perplexitys talsmann Jesse Dwyer avviste posten som en «sales pitch» og hevdet at ingen innhold var tilgang og at boten ikke er deres.
Saken berører innsamling av data til kunstlig intelligens (KI) og er relevant for norske nettutgivere og publisister som prøver å beskytte innhold via robots.txt. Cloudflare har fjernet Perplexitys roboter fra sin verifiserte liste og innført nye blokkeringsteknikker; Perplexity er tidligere blitt anklaget for uautorisert skraping av nyhetsinnhold, en sak omtalt i AI-nyheter.
Kilde: https://techcrunch.com/2025/08/04/perplexity-accused-of-scraping-websites-that-explicitly-blocked-ai-scraping/ | Sammendraget er KI-generert med OpenAI API av Ainy.no
