Maßnahme gegen Webcrawler: Cloudflare ermöglicht Trennung von KI- und Suchbots

Cloudflare bietet Webseitenbetreibern die Möglichkeit, keine Suchbots sperren zu müssen, wenn sie das Sammeln ihrer Daten verhindern möchten. (Cloudflare, KI)
Quelle: Golem