Bots überholen Menschen im Netz: was das für Websites heißt
07. Juni 2026
KI-generiert, redaktionell von 8thsense ausgewählt, geprüft und freigegeben. EU AI Act, Art. 50
Zum ersten Mal in der Geschichte des Internets kommen mehr Seitenaufrufe von Maschinen als von Menschen. Laut Daten des Sicherheitsanbieters Cloudflare stammen inzwischen 57,5 Prozent aller HTTP-Anfragen von Bots, nur noch 42,5 Prozent von echten Nutzern. Cloudflare-Chef Matthew Prince hatte diesen Punkt erst für 2027 erwartet. Treiber des frühen Umschwungs sind nicht die bekannten Suchmaschinen-Crawler, sondern eine neue Art von Programmen: autonome KI-Agenten, die im Auftrag von Nutzern eigenständig durchs Netz gehen. Für jede Firma mit einer Website verschiebt das eine simple Grundannahme: Ihre Besucher sind nicht mehr überwiegend Menschen.
Zum ersten Mal mehr Maschinen als Menschen
Die Zahl stammt aus dem laufenden Netzwerk-Monitoring von Cloudflare, das nach eigenen Angaben einen erheblichen Teil des weltweiten Web-Traffics absichert. 57,5 zu 42,5 Prozent, gemessen an HTTP-Anfragen (Quelle: tomshardware.com). Wichtig für die Einordnung: Gemessen wird die reine Zahl der Anfragen, nicht die Verweildauer. Beim Streamen, Scrollen und Lesen verbringen Menschen weiter den Großteil der Zeit im Netz. Eine Person löst beim Surfen aber vergleichsweise wenige Seitenabrufe aus, während ein einziger Bot in Minuten tausende erzeugen kann. Die Mehrheit der Klicks ist also maschinell, die Mehrheit der Aufmerksamkeit noch menschlich.
Warum es diesmal anders ist
Bot-Verkehr ist nicht neu. Suchmaschinen indexieren seit Jahrzehnten, Preisvergleiche und Monitoring-Dienste laufen rund um die Uhr. Neu ist die Geschwindigkeit, mit der die Kurve gekippt ist: rund 18 Monate früher als von Cloudflare im Frühjahr noch prognostiziert (Quelle: techcrunch.com). Der Grund sind agentische KI-Systeme. Wer einen Assistenten bittet, eine Kamera zu finden, schickt damit einen Agenten los, der selbstständig Dutzende oder Hunderte Shops, Testberichte und Datenblätter abklappert. Was früher ein Mensch mit fünf Tabs erledigte, erledigt heute ein Programm mit tausend Anfragen. Diese Agenten lesen Ihre Website, vergleichen sie mit anderen und geben dem Nutzer am Ende eine fertige Antwort, oft ohne dass die Person Ihre Seite je selbst öffnet.
Was das konkret für eine Firmen-Website bedeutet
Die Verschiebung ist kein abstraktes Statistik-Thema, sondern hat handfeste Folgen für jeden Betrieb mit Online-Präsenz:
Verzerrte Zahlen: Wer Besucherstatistiken ohne Bot-Filter liest, misst zunehmend Maschinen. Entscheidungen über Budgets oder Kampagnen auf Basis solcher Zahlen gehen schnell daneben.
Serverlast und Kosten: Agenten, die im Sekundentakt Seiten abrufen, erzeugen Last. Bei kleinen Hosting-Paketen kann das spürbar werden, bis hin zu langsameren Ladezeiten für echte Kunden.
Sichtbarkeit verlagert sich: Wenn KI-Assistenten Antworten zusammenfassen, entscheidet sich die Auffindbarkeit nicht mehr nur über die Google-Position, sondern darüber, ob ein Agent Ihre Inhalte sauber lesen und korrekt wiedergeben kann.
Inhalte werden abgegriffen: Texte, Preise und Ratgeber werden für KI-Training und KI-Antworten genutzt, häufig ohne Verweis zurück auf die Quelle und ohne Gegenleistung.
Blockieren oder sichtbar bleiben
Genau hier sitzt die eigentliche Entscheidung, und sie ist unbequem. Cloudflare blockiert KI-Crawler inzwischen standardmäßig und bietet Werkzeuge, um die Kontrolle zurückzuholen: eine verwaltete robots.txt, die bekannten KI-Bots das Training untersagt, sowie ein Modell namens Pay-Per-Crawl, bei dem ein Server mit dem HTTP-Status 402 (“Payment Required”) eine Bezahlung pro Abruf verlangt (Quelle: blog.cloudflare.com). Über zweieinhalb Millionen Websites untersagen laut Cloudflare bereits das KI-Training. Doch komplettes Blockieren hat einen Preis: Wer alle Agenten aussperrt, taucht in deren Antworten auch nicht mehr auf. Für einen lokalen Dienstleister, der gefunden werden will, ist Unsichtbarkeit in der KI-Suche keine Option. Es geht also nicht um ein simples Ja oder Nein, sondern um eine feine Unterscheidung: welche Agenten dürfen lesen, welche zahlen, welche bleiben draußen. robots.txt allein ist dabei ein schwaches Werkzeug, das sich ignorieren lässt (Quelle: developers.cloudflare.com).
Was das für Unternehmen bedeutet
Für mittelständische Betriebe ist die erste Aufgabe nüchtern und kostet wenig: Schauen Sie nach, wer Ihre Website tatsächlich besucht. Ein Blick in die Server-Logs oder ein Bot-Filter im Analyse-Tool trennt Maschinen von Menschen und zeigt, ob Ihre schönen Besucherzahlen real sind. Das kann eine Person im Team in wenigen Stunden aufsetzen. Der zweite Schritt ist die bewusste Entscheidung, welche KI-Crawler Sie zulassen. Eine Tanzschule oder ein Pflegedienst, der von Assistenten empfohlen werden will, sollte seine Inhalte für seriöse Agenten lesbar halten, während ein Verlag oder ein Ratgeber-Portal mit eigenem Content gute Gründe hat, beim Training Grenzen zu ziehen.
Der Reflex, einfach ein Plugin zu installieren und alle Bots zu sperren, schadet hier oft mehr, als er nützt. Wer pauschal blockiert, verschwindet aus der KI-Suche; wer alles offen lässt, verschenkt Inhalte und Serverkapazität. Die saubere Lösung liegt dazwischen und hängt an den eigenen Inhalten und Prozessen: Welche Seiten sollen in KI-Antworten auftauchen, welche nicht? Das ist weniger eine Frage der Technik als der Strategie, und es lohnt sich, sie einmal richtig zu durchdenken, statt sie dem Zufall einer Standardeinstellung zu überlassen. Wer früh eine durchdachte KI-Sichtbarkeit aufsetzt, statt nur zu reagieren, sichert sich einen Vorsprung in einem Netz, das gerade von Maschinen neu vermessen wird.