Web-Crawling ist ein wichtiges Mittel zum Abrufen öffentlicher Daten. Der Abfangmechanismus von Sicherheitsdiensten wie Cloudflare führt jedoch häufig zu Crawling-Fehlern.