KI-Agenten fluten das Netz – laut Cloudflare surfen jetzt mehr Bots als Menschen

Laut Cloudflare-CEO Matthew Prince hat der Bot-Traffic den menschlichen Traffic im Internet erstmals überholt. Prince schreibt, er habe diesen Wendepunkt ursprünglich erst für Ende 2027 erwartet. Der rasant wachsende automatisierte Datenverkehr durch KI-Agenten habe die Entwicklung aber stark beschleunigt. Der Umschwung sei in den vergangenen Monaten passiert. Die Daten seien noch etwas ungenau, in ihrer Aussage aber eindeutig.

Prince stellt klar, dass die Begriffe Bot, Crawler und Agent im Grunde dasselbe meinen. Die Bezeichnung hänge nur davon ab, ob man sie positiv oder negativ bewerten wolle. Als Konsequenz sieht Prince ein kostenpflichtiges Crawling-Modell kommen. "Es wird eindeutig ein Pay-to-Crawl-System geben", schreibt er. Die nötigen Protokolle und die Infrastruktur dafür seien in Arbeit. Seine Firma stellte im vergangenen Sommer eine Plattform vor, bei der Webseitenbetreiber KI-Crawler erst zulassen müssen und dann zur Kasse bitten können. Bislang hat sich das System nicht etabliert.