Cloudflare blockiert KI-Crawler: Was es für Backlinks bedeutet

Am 15. September 2026 hat Cloudflare eine Default-Einstellung umgelegt, die ein Fünftel des Webs betrifft, und sie hat leise verändert, was ein Backlink für dich tun kann. Seiten, die durch Cloudflare geschützt sind, blockieren jetzt „gemischt genutzte“ KI-Crawler standardmäßig auf werbefinanzierten Seiten, während klassische Suchcrawler wie Googlebot weiterhin durchkommen. Für jeden, der Links kauft, entsteht dadurch eine Aufteilung, die es vorher nicht gab: Ein Link kann für die Google-Suche weiterhin vollen Wert weitergeben und no Wert für KI-Suchzitate, allein wegen der Bot-Einstellungen des Spenders. Hier ist, was sich geändert hat, warum es für dein Linkprofil zählt, und der eine Check, den du bei einem Spender durchführen solltest, bevor du zahlst.

Was Cloudflare tatsächlich geändert hat

Cloudflares Position ist, dass Ersteller, nicht KI-Unternehmen, entscheiden sollten, wer ihre Inhalte bekommt. Wie die Pay-per-Crawl-Ankündigung es formulierte: „Wenn ein Ersteller alle KI-Crawler von seinen Inhalten blockieren will, sollte er das tun können. Wenn ein Ersteller einigen oder allen KI-Crawlern vollen Zugang zu seinen Inhalten kostenlos gewähren will, sollte er das auch tun können.“ Die Änderung am 15. September machte diesen Grundsatz zur Standardeinstellung.

Die Mechanik ist entscheidend. Auf werbefinanzierten Seiten blockiert Cloudflare jetzt Crawler in Schulung und Agent Kategorien standardmäßig und blockiert „Mixed-Use“-Crawler, die nicht sauber trennen, was sie tun. Reine search Crawler bleiben weiterhin zugelassen, weshalb Googlebot nicht betroffen ist. Publisher können sich auch für Pay Per Crawl entscheiden und jeden Crawler auf einen von drei Status setzen – „Allow" (kostenlos), „Charge" (Zahlung erforderlich) oder „Block" –, wobei Cloudflare als Merchant of Record fungiert. Das neuere Pay Per Use-Modell, angekündigt am 1. Juli 2026, zahlt Publisher beim Output-Event, wenn ihre Inhalte in einer KI-generierten Antwort erscheinen, und nicht bei jedem Crawl.

Das entscheidende Detail zum Geltungsbereich: Diese Voreinstellung wird angewendet auf neue Domains und kostenlose Tarife. Eine bereits auf Cloudflare eingerichtete etablierte Site schaltet am 15. September nicht automatisch um. Aber diese Verschiebung ist für Linkkäufer relevant, denn ein großer Teil der günstigen, frisch erstellten Spender-Domains sind genau die neu registrierten Free-Plan-Projekte, die es am härtesten trifft.

Warum das für Ihre Backlinks wichtig ist

Ein Backlink leistet nur dann Arbeit, wenn die Seite, auf der er sich befindet, von dem gelesen werden kann, was Sie beeinflussen möchten. Für klassisches SEO ist dieser Leser der Googlebot – und der Googlebot kommt nach wie vor durch Cloudflares neuen Standard hindurch. Für KI-Suche sind die Leser jedoch eine völlig andere Gruppe von Bots, und genau diese werden nun abgewehrt. Das Ergebnis ist eine Zwei-Kanal-Aufspaltung in einem einzigen Link:

Crawler	Zweck	Cloudflare-Standard (Anzeigenseiten)	Wirkung auf Ihren Link
Googlebot	Klassische Suche	Erlaubt	Voller Wert für Google-Rankings
GPTBot (OpenAI)	Schulung / Agent	Blockiert	Kein Weg in ChatGPT-Antworten
ClaudeBot (Anthropic)	Schulung / Agent	Blockiert	Kein Weg in Claude-Antworten
PerplexityBot	Agent / Antwort-Engine	Blockiert	Kein Weg in Perplexity-Zitationen

Lies das als Warnung für das Ziel der KI-Sichtbarkeit, das inzwischen so viele Linkkäufer verfolgen. Wir haben behandelt in unserer Beitrag darüber, woher KI-zitierte Links stammen dass ein wachsender Anteil der Linkbudgets darauf abzielt, von ChatGPT und Perplexity erwähnt zu werden, nicht nur auf Seite eins zu ranken. Wenn die Spenderseite hinter Cloudflares neuem Standard liegt, kauft dieses Geld nichts für KI-Zitate – die KI-Crawler sehen den Link nie. Für reines Google-SEO ist der Link in Ordnung. Für KI-Suche ist er möglicherweise unsichtbar.

Der Spender, den Sie gekauft haben, ist für KI möglicherweise bereits unsichtbar

Das ist nicht hypothetisch. Ein günstiger Link, platziert auf einer brandneuen Seite mit Cloudflare-Free-Plan, blockiert nach dieser Voreinstellung wahrscheinlich gerade jeden KI-Crawler. Sie würden es nie an einem DR-Score oder einer Traffickurve erkennen. Das Prüfen ist einfach, und es ist die Prüfung, die fast niemand ausführt:

• Rufen Sie die Seite als KI-Crawler ab. Fordern Sie die Spender-URL mit einem GPTBot- oder ClaudeBot-User-Agent an und prüfen Sie, ob Sie den Inhalt oder eine Blockierung erhalten. Eine 403 oder eine Challenge-Seite bedeutet, dass der Link für diese Engine unsichtbar ist.
• Die robots.txt lesen. Explizit Disallow Regeln für GPTBot, ClaudeBot, Google-Extended oder PerplexityBot sind ein direktes Signal, dass die Site KI aussperren will.
• Prüfen Sie, ob es eine neue Domain auf einem kostenlosen Plan ist. Das sind die Eigenschaften, auf die Cloudflares Standard zielt. Ein frisch registrierter Donor ist der höchstrisikoreiche Fall.
• Bestätigen Sie, dass die Seite für einen Bot tatsächlich rendert. Ein Link innerhalb von Inhalten, die nur ein eingeloggter Mensch sieht, gibt keinem Crawler etwas weiter, auch keinem KI-Crawler.

Was vor dem Kauf eines Links für KI-Sichtbarkeit zu prüfen ist

Wenn Sie auch von KI-Suchmaschinen zitiert werden wollen, ist die Bot-Politik des Spenders jetzt ein erstklassiges Kaufkriterium und steht gleichberechtigt neben Relevanz und echtem Traffic:

• KI-Crawler-Zugang. Der Spender sollte GPTBot, ClaudeBot und PerplexityBot erlauben, seine Inhalte abzurufen. Das ist das neue, entscheidende Signal, und genau das überprüft der Markt derzeit noch nicht.
• Googlebot-Zugriff. Standardmäßig weiterhin erlaubt, aber bestätigen Sie es trotzdem – eine falsch konfigurierte Seite kann alles blockieren.
• Echter Traffic und Relevanz. Unverändert. Eine zugängliche Seite ohne Leser und ohne thematische Passung ist immer noch ein schwacher Link.
• Etabliert, nicht frisch aufgesetzt. Die neuen Domains von Free-Plan-Spendern, die am ehesten AI-Crawler blockieren, sind auch aus jedem anderen Grund die minderwertigsten Platzierungen.

Die Kernaussage ist, dass KI-Zugänglichkeit und Linkqualität in dieselbe Richtung weisen. Die Domains, die KI-Crawler standardmäßig blockieren, sind überproportional häufig die günstigen, neuen Free-Plan-Seiten, die Sie ohnehin schon meiden sollten.

Wo das Linkkäufer zurücklässt

Cloudflare hat gerade die Bot-Richtlinie eines Spenders zum Teil des Linkwerts gemacht. Ein Placement auf einer echten, etablierten Seite, die KI-Crawler reinlässt, kann sowohl Google-Rankings als auch KI-Zitationen speisen. Ein Placement auf einer neuen, werbevollgestopften Free-Plan-Seite kann keines von beidem speisen. Genau das ist der Filter hinter der Art und Weise, wie Rixot beschafft Platzierungen: echten Traffic, etablierte Spender, die sowohl von Suchmaschinen als auch von KI-Crawlern tatsächlich erreicht werden – und nicht kurzlebige Domains, die in einem Metrik-Tool zwar gut aussehen, aber für die relevanten Engines unsichtbar sind. Da KI-Suche zunehmend Klicks an sich zieht, wird aus „kann die KI diesen Link überhaupt sehen“ keine technische Randnotiz mehr, sondern die entscheidende Frage.

FAQ

Blockiert Cloudflare Googlebot?

Nein. Cloudflares Standard vom 15. September 2026 blockiert Mixed-Use- und Training-/Agent-AI-Crawler auf werbefinanzierten Seiten, aber zweckgebundene Such-Crawler wie Googlebot bleiben erlaubt. Klassisches Google-SEO ist vom Standard nicht betroffen.

Welche KI-Crawler blockiert die Cloudflare-Standard-Einstellung?

Crawler in den Trainings- und Agenten-Kategorien sowie „gemischt genutzte" Crawler, die ihre Funktionen nicht trennen – in der Praxis GPTBot, ClaudeBot, PerplexityBot und ähnliche. Die Sperre gilt standardmäßig auf werbefinanzierten Seiten für neue Domains und kostenlose Tarife.

Wie wirkt sich das auf meine Backlinks aus?

Wenn die Spenderseite, die Ihren Link hostet, KI-Crawler blockiert, kann dieser Link nicht zu Zitaten in ChatGPT, Claude oder Perplexity beitragen, obwohl er für die Google-Suche noch Wert überträgt. Für KI-Sichtbarkeitsziele ist ein KI-seitig blockierter Spender effektiv tot.

Wie überprüfe ich, ob ein Donor KI-Crawler blockiert?

Rufen Sie die Seite mit einem GPTBot- oder ClaudeBot-User-Agent ab und prüfen Sie, ob Sie den Inhalt oder ein 403/Challenge erhalten, und lesen Sie die robots.txt der Seite nach Disallow-Regeln gegen GPTBot, ClaudeBot, Google-Extended oder PerplexityBot. Neue Domains auf Cloudflare-Free-Tarifen sind am stärksten gefährdet.

Was ist Cloudflare Pay Per Crawl?

Es erlaubt Publishern, jeden KI-Crawler auf Allow (kostenlos), Charge (Zahlung verlangen) oder Block zu setzen, mit Cloudflare als Merchant of Record. Das verwandte Pay Per Use-Modell, angekündigt am 1. Juli 2026, zahlt Publishern, wenn deren Inhalt in einer KI-generierten Antwort auftaucht.

Quellen

• Cloudflare – „Einführung von Pay per Crawl“, blog.cloudflare.com
• TechCrunch – „Cloudflares neue Richtlinie drängt KI-Unternehmen, für Inhalte von Verlegern zu zahlen“ (1. Juli 2026), techcrunch.com
• The Next Web – „Cloudflare to block AI crawlers, pay publishers," thenextweb.com