Cloudflare will, dass KI-Bots für Inhalte bezahlen

Die Einstellungen betreffen jede Website hinter Cloudflare schon jetzt, die Bezahlmodelle die meisten noch nicht.

Stand: 9. Oktober 2026

Websites verdienen ihr Geld mit Besuchern: über Werbung, Abos oder Verkäufe. KI-Dienste wie ChatGPT lesen Websites inzwischen in großem Stil, doch nur wenige Nutzer:innen klicken danach auf die Quelle. Laut Cloudflare kamen Anfang August 2025 auf jeden Besuch, den ChatGPT auf eine Website weiterleitete, 887 Seitenabrufe durch Bots von OpenAI. Die Inhalte werden also genutzt, nur die Besucher und damit das Geld bleiben aus. Cloudflare, ein Dienst, über den rund ein Fünftel aller Websites läuft, will das ändern. Das Unternehmen baut Regeln, mit denen Sie festlegen, was KI-Bots mit Ihren Inhalten tun dürfen, und eine Kasse, über die Bots dafür bezahlen sollen.

Warum bringen Inhalte im KI-Web weniger ein?

Lange galt im Web ein einfacher Tausch. Matthew Prince, der Chef von Cloudflare, beschreibt ihn sinngemäß so: Google darf Ihre Inhalte für die Suche kopieren und schickt Ihnen dafür Besucher. Dieser Tausch funktioniert laut Prince nicht mehr. Im Juli 2025 rechnete er vor, dass es bei Google heute etwa zehnmal schwerer ist als vor zehn Jahren, für die eigenen Inhalte dieselbe Zahl an Besuchern zu bekommen. Bei OpenAI sei es 750-mal schwerer, bei Anthropic 30.000-mal.

Der Grund ist, dass KI-Dienste eine Antwort liefern statt einer Liste von Links. Das Pew Research Center hat das für Google gemessen: Erschien über den Ergebnissen eine KI-Zusammenfassung, klickten Menschen bei 8 % der Suchen auf ein Ergebnis, ohne Zusammenfassung bei 15 %. Auf die Links in der Zusammenfassung selbst klickten sie nur bei 1 % der Suchen. Solche Suchen ohne Klick auf eine Website heißen Zero-Click.

Gleichzeitig war laut Cloudflare 2026 erstmals mehr als die Hälfte des Internet-Traffics nicht menschlich. Anfragen von KI-Agenten, also Software, die im Auftrag eines Menschen im Web etwas erledigt, stiegen im letzten Jahr um über 1.700 %. Cloudflare nennt diese Agenten das „zweite Publikum“ des Webs. Für Ihre Website heißt das: Ein Agent liest Ihre Seite, aber er sieht keine Werbung und schließt kein Abo ab.

Warum ausgerechnet Cloudflare?

Cloudflare ist ein CDN, ein Netzwerk, das vor Websites sitzt. Anfragen von Besuchern und Bots gehen zuerst an Cloudflare und erst dann an den Server der Website. Laut Cloudflare läuft rund ein Fünftel des Webs über das Netzwerk, W3Techs zählt im Oktober 2026 sogar 26,7 % aller Websites. Weil es einen kostenlosen Tarif gibt, sind darunter auch viele kleine Seiten.

Entscheidend ist deshalb die Position: Cloudflare sieht jede Anfrage, bevor sie Ihre Website erreicht. Das Unternehmen kann Bots erkennen, sperren und, wenn es eine Kasse gibt, auch abrechnen.

Wer darf was? Die Regeln für Bots

Die älteste Regel ist die robots.txt, eine Textdatei auf jeder Website, in der steht, welche Bots was lesen dürfen. Sie ist eine Bitte, keine Sperre.

Im September 2025 folgten die Content Signals. Sie erweitern die robots.txt um drei Angaben: ob Inhalte in einen Suchindex dürfen, ob KI-Dienste sie als Grundlage für Antworten verwenden dürfen und ob sie zum Training von KI-Modellen dienen dürfen. Für über 3,8 Millionen Domains setzt Cloudflare automatisch „Suche ja, Training nein“. Cloudflare sieht darin einen ausdrücklichen Vorbehalt, unter anderem nach dem EU-Urheberrecht. Ob das rechtlich trägt, ist nicht abschließend geklärt, und wir geben hier keine Rechtsberatung.

Seit 15. September 2026 gibt es im Dashboard statt eines Schalters „KI-Bots blockieren“ drei getrennte Schalter: Suche, Training und Agenten. Damit können Sie Training ablehnen und trotzdem in der Suche bleiben. Für neue Seiten und für kostenlose Bestandskunden, die nichts geändert haben, gilt seit Juli 2026 eine neue Voreinstellung: Suche erlaubt, Training und Agenten auf Seiten mit Werbung blockiert.

Ein Problem lösen die Schalter allerdings nicht. Manche Bots sammeln für Suche und Training zugleich. Wer bei ihnen Training sperrt, sperrt auch die Suche. Diese gemischten Crawler machen laut Cloudflare 36,6 % des geprüften Crawler-Traffics aus. Cloudflare stuft Google trotzdem als „accountable“ ein, also als Anbieter, der die Trennung ermöglicht: Über die Angabe Google-Extended können Sie das Training ablehnen, ohne aus der Suche zu fallen. Die KI-Übersichten in der Google-Suche deckt diese Einstellung aber nicht ab.

Für kleine Websites ist die Kasse noch weit weg. Die Regeln dagegen betreffen schon heute jede Seite hinter Cloudflare: Wer nichts einstellt, hat trotzdem eine Einstellung.

Wie sollen Bots bezahlen? Pay Per Use und das Monetization Gateway

Den ersten Versuch startete Cloudflare im Juli 2025 mit Pay per Crawl. Betreiber:innen legen pro Bot fest, ob er kostenlos lesen darf, bezahlen muss oder gesperrt ist. Damit sich kein Bot als ein anderer ausgibt, weisen sich Bots mit einer digitalen Signatur aus.

Seit 30. September 2026 testet Cloudflare Pay Per Use. Hier wird bezahlt, wenn ein Inhalt tatsächlich genutzt wird, nicht schon beim Abruf. Laut Cloudflare rufen KI-Dienste nämlich viel mehr Seiten ab, als sie verwenden. Eine KI-Firma macht ein Angebot mit Preis, und Sie nehmen es im Dashboard an oder nicht. Die KI-Firma meldet jede Nutzung selbst, Cloudflare stellt sie in Rechnung und zahlt monatlich aus. Die ersten Partner sind Ceramic.ai und You.com, große KI-Firmen nennt Cloudflare nicht.

Das Monetization Gateway geht noch weiter. Es nutzt den HTTP-Statuscode 402, eine seit Jahrzehnten reservierte und kaum benutzte Antwort des Servers, die „Bezahlung erforderlich“ bedeutet. Ein Agent fragt an, bekommt 402 mit einem Preis, zahlt und erhält die Antwort, ohne Anmeldung und ohne vorherige Geschäftsbeziehung.

Bezahlt wird in USDC, einer an den US-Dollar gekoppelten Digitalwährung. Das Gateway ist in geschlossener Beta und nur in den USA verfügbar. Für Artikel verweist Cloudflare selbst auf Pay Per Use. Welche Gebühren Cloudflare verlangt, ist bei keinem der Modelle genannt.

Unsere Einschätzung: Setzt sich das durch?

Unsere Einschätzung: Cloudflare setzt gerade die Standards dafür, wie Betreiber:innen den Zugriff von Bots regeln, also ob Training, Zugriff und Nutzung erlaubt sind. Das wirkt unabhängig davon, ob jemals Geld fließt. Daneben versucht Cloudflare, einen neuen Weg zu finden, wie Websites ihre Inhalte zu Geld machen, obwohl weniger Menschen vorbeikommen. Bisher gelingt das vor allem großen Verlagen. Laut Cloudflare haben Verlage und KI-Firmen im letzten Jahr über 50 große Lizenzverträge geschlossen, kleine Websites sind bei solchen Verträgen nicht dabei.

Ob sich das durchsetzt, ist fraglich. Cloudflare veröffentlicht keine Zahlen dazu, wie viele Seiten bereits verdienen und wie viel Geld fließt. Pay Per Use beruht auf der Selbstauskunft der KI-Firmen. Ohne die großen KI-Firmen und ohne Google bleibt es klein. Kritiker vergleichen Cloudflares Rolle außerdem mit Apple und Google bei den App-Stores: ein Unternehmen als Türsteher und Kasse, mit eigenen geschäftlichen Interessen.

Trotzdem halten wir den Ansatz für sehr spannend. Er verbindet Regeln und Bezahlung und ist für jede Website gedacht, nicht nur für große Verlage.

Was jetzt

Quellen

1. Cloudflare, 01.07.2025: Content Independence Day: no AI crawl without compensation, abgerufen am 09.10.2026
2. Pew Research Center, 22.07.2025: Google users are less likely to click on links when an AI summary appears in the results, abgerufen am 09.10.2026
3. Cloudflare, 30.09.2026: The Internet has a second audience, abgerufen am 09.10.2026
4. W3Techs, Oktober 2026: Usage statistics and market share of Cloudflare, abgerufen am 09.10.2026
5. Cloudflare, 24.09.2025: Content Signals Policy, abgerufen am 09.10.2026
6. Cloudflare, 15.09.2026: Pressemitteilung zu Disallow AI Training, abgerufen am 09.10.2026
7. Cloudflare, 01.07.2026: Pressemitteilung „Your Content, Your Rules“, abgerufen am 09.10.2026
8. Cloudflare, 01.07.2025: Introducing pay per crawl, abgerufen am 09.10.2026
9. Cloudflare, 30.09.2026: Pay Per Use, abgerufen am 09.10.2026
10. Cloudflare, 01.07.2026: Monetization Gateway, abgerufen am 09.10.2026
11. Cloudflare, 30.09.2026: Monetization Gateway beta, abgerufen am 09.10.2026
12. AdMonsters, 07.08.2025: Cloudflare’s AI Tollbooth, abgerufen am 09.10.2026