Cloudflare schafft Grundlage für ein florierendes agentenbasiertes Internet nach einfachem Prinzip: Ihre Inhalte, Ihre Regeln

SAN FRANCISCO (KALIFORNIEN) – 1. Juli 2026 – Cloudflare, Inc. (NYSE: NET), der führende Anbieter im Bereich Connectivity Cloud, stellt heute neue Klassifizierungen, erweiterte Analysen und branchenbestimmende Geschäftspartnerschaften vor, die zur Förderung eines agentenbasierten Internets Betreiberinnen und Betreiber von Websites und transparente KI-Unternehmen zusammenbringen. Die neuen Tools und Integrationen von Cloudflare helfen Inhaberinnen und Inhabern von Websites und KI-Unternehmen, Auffindbarkeit, Effizienz und Monetarisierung zu optimieren. Mit diesen neuen Strukturen leistet Cloudflare einen Beitrag zum Fundament einer robusten, partnerschaftlich orientierten und agentenbasierten Wirtschaft, von der die Gesamtgesellschaft ebenso profitiert wie Betreiberinnen und Betreiber von Websites und KI-Unternehmen.

Die Grundstruktur des Internet-Traffics hat sich verändert. Heute stammt mehr als die Hälfte aller Webanfragen von automatisierten Agenten und Bots. KI wird zur neuen Schnittstelle für den Informationszugang und den Online-Handel und verändert die Regeln für das Auffinden von Inhalten. Die meisten Inhaberinnen und Inhaber von Websites möchten, dass ihre Inhalte in KI-Systeme einfließen. Wenn ihr Geschäftsmodell aber auf Werbung oder Abonnements basiert, stellen KI-Systeme eine Bedrohung dar, falls diese die Inhalte von Unternehmen zwar zum Training nutzen, dies aber nicht vergüten. Unserer Meinung nach sollte Unternehmen, die ihre Inhalte KI-Systemen zur Verfügung stellen möchten, dafür die unkomplizierteste und effizienteste Möglichkeit geboten werden. Doch zugleich sollte man den Firmen, die das das nicht wollen, die Werkzeuge für eine Beschränkung des KI-Zugriffs an die Hand geben. Cloudflare testet deshalb neue Standardklassifizierungen, bietet Kundinnen und Kunden tiefergehende Erkenntnisse, beschleunigt die KI-Suche und sorgt dafür, dass Urheberinnen und Urheber entlohnt werden, wenn ihre Inhalte eine Antwort möglich machen. Auf diese Weise wird für Chancengleichheit gesorgt, die Effizienz des Crawlings optimiert, geistiges Eigentum geschützt und Urheberinnen und Urhebern ebenso wie KI der Erfolg in einer agentenbasierten Wirtschaft ermöglicht.

„Im vergangenen Jahr haben wir den Betreiberinnen und Betreibern von Websites Übersicht und Kontrolle darüber ermöglicht, welche Bots auf ihre Inhalte zugreifen. Wir sind begeistert von den Vorteilen, die dies dem Ökosystem beschert hat“, so Matthew Prince, Mitgründer und CEO von Cloudflare. „Da ein Großteil des Internetdatenverkehrs nicht von Menschen generiert wird, müssen wir aber noch weiter gehen und schneller handeln, damit ein nachhaltiges Ökosystem entstehen kann. Die neuen Tools und Partnerschaften von Cloudflare bieten Betreiberinnen und Betreibern von Websites einen besseren Überblick und neue Geschäftschancen. Sie kommen KI-Unternehmen zugute, deren Bots eine eindeutige und transparente Absicht verfolgen. Wir hoffen, dass die von uns vorgeschlagenen Standardänderungen Betreiber von Crawlern mit verschiedenen Verwendungszwecken dazu ermutigen, die Suche von der Agenten-Nutzung und dem KI-Training zu trennen.“

Ende der Narrenfreiheit für Crawler mit mehreren Verwendungszwecken

Nach Tausenden von Gesprächen mit KI-Unternehmen und Betreiberinnen und Betreibern von Websites ist eines klar: Die meisten wollen über KI auffindbar sein. Allerdings sollte für diejenigen, die sich über Werbung und/oder Abonnements finanzieren, die Maximierung der Auffindbarkeit nicht bedeuten, dass sie ihr geistiges Eigentum einfach kostenlos zur Verfügung stellen müssen. Transparente KI-Unternehmen haben dies ermöglicht, indem sie ihre Bots klar nach Verwendungszweck getrennt und gekennzeichnet haben. Crawler-Bots, die mehrere Funktionen haben, vermengen hingegen Suche sowie Agenten-Nutzung und Training. Das schadet sowohl Inhaberinnen und Inhabern von Websites als auch transparenten KI-Unternehmen. So sind etwa Anbieterinnen und Anbieter von Inhalten dadurch im Agentenzeitalter gezwungen, zwischen der Auffindbarkeit ihrer wertvollsten Inhalte und deren unbezahlter Bereitstellung zu wählen. Heute hat die größte Suchmaschine Zugang zu etwa doppelt so vielen Informationen wie führende KI-Unternehmen, weil Letztere den Kunden die Auffindbarkeit erschweren, wenn diese nicht wollen, dass ihre Inhalte auch für KI-Zwecke genutzt werden.

In den nächsten zwei Monaten wird Cloudflare mit dem Ökosystem in Austausch treten, Feedback sammeln und Tests durchführen, um die neuen Standards und Klassifikationen bis zum 15. September 2026 in ihre endgültige Form zu bringen.

Für neue Kundinnen, Kunden und Websites bestehender Kundinnen und Kunden werden am 15. September 2026 die Standardeinstellungen so gesetzt, dass sie zwar für Suchen zugelassen sind, Seiten mit Werbung für das Training und die Nutzung von Agenten aber gesperrt werden. Gemischte Crawler, bei denen Betreiberinnen und Betreiber von Websites nicht zwischen Suche oder Agenten-Nutzung und KI-Training wählen können, werden auf allen Seiten blockiert, die Werbeanzeigen enthalten. Diese Einstellungen können jederzeit im Dashboard angepasst werden.

Die Änderung greift am 15. September 2026 auch für alle bestehenden Kundinnen und Kunden mit Free-Tarif, die ihre Einstellungen bis zu diesem Zeitpunkt in ihrem Dashboard nicht angepasst haben. So sollen für herkömmliche Suchmaschinen und alle KI-Unternehmen, die im Agenten-Zeitalter Auffindbarkeit neu definieren, auf gerechte und transparente Weise gleiche Wettbewerbsbedingungen geschaffen werden.

Erweiterte Analysen für umfassenderen Überblick und bessere Monetarisierung von Inhalten

Es gibt nun einen Markt für monetarisierte Inhalte, denn allein im letzten Jahr haben Verlage, Publisher und KI-Plattformen mehr als 50 große Inhaltslizenzverträge unterzeichnet. Um den Abschluss weiterer Vereinbarungen dieser Art zu unterstützen, führt Cloudflare das Attribution Business Insights-Dashboard ein. Dieses beseitigt ein seit langem bestehendes Datenungleichgewicht, aufgrund dessen Urheberinnen und Urheber bislang „blind“ in die entsprechenden Geschäftsverhandlungen gehen mussten. Zum ersten Mal können nun nicht nur Sicherheits- und IT-Teams, sondern auch geschäftliche Entscheidungsträgerinnen und -träger klar sehen, wie KI-Bots ihre Inhalte konsumieren. Außerdem lässt sich nachverfolgen, wie viel auf den Menschen zurückgehender Datenverkehr durch bestimmte KI-Unternehmen tatsächlich weitergeleitet wird.

Doch das ist nur der erste Schritt. Da heute zunehmend nicht mehr Suchmaschinen, sondern „Antwortmaschinen“ für die Auffindbarkeit sorgen, müssen Kundinnen und Kunden eine neue Disziplin meistern: Answer Engine Optimization (AEO). Dafür muss man nicht nur wissen, wer das Crawling betreibt, sondern auch, wie die eigenen Inhalte in KI-generierten Antworten wiedergegeben werden, wie häufig und wie prominent sie darin auftauchen – und dies für die verschiedenen auf dem Markt existierenden Modelle. So wie Web Analytics zur elementaren Infrastruktur des Suchmaschinen-Zeitalters geworden ist, möchte Cloudflare die ultimative Mess- und Optimierungsschicht für das KI-Zeitalter bieten.

Smartere Suche und faire Vergütung

Individuell ausgehandelte Vereinbarungen können für die größten Verlage und Publisher funktionieren, aber sie lassen sich nicht einfach auf den Rest des Webs übertragen. Cloudflare arbeitet an zwei Fronten, die sowohl Urheberinnen und Urhebern als auch KI-Unternehmen helfen: die Effizienzsteigerung der KI-Suche und die automatische Vergütung von Urheberinnen und Urhebern bei Verwendung ihrer Arbeit. Heute durchforsten KI-Modelle und Suchmaschinen zur Beantwortung von Nutzerfragen wiederholt Millionen unveränderter Webseiten nach neuen Daten. Cloudflare-Erhebungen legen nahe, dass mehr als die Hälfte des Crawler-Traffics von KI-Bots generiert wird, die unveränderte Seiten erneut abrufen. Das bedeutet verschwendete Bandbreite für Verleger und Publisher sowie verschwendete Rechenkapazität für KI-Unternehmen, ohne dass den Nutzern dadurch bessere Antworten geliefert werden. Cloudflare kann sehen, wo tatsächlich Veränderungen vorgenommen wurden. Deshalb können wir auch signalisieren, wann eine Seite neu durchsucht werden sollte und wann nicht. So wird nicht nur die Zahl überflüssiger Crawling-Durchgänge reduziert, sondern es lassen sich auch bessere Ergebnisse erzielen. Wir testen dies mit führenden KI-Unternehmen, um zu messen, wie sehr sich dadurch die Aktualität verbessert und unnötiges Crawling verringert wird. Im weiteren Jahresverlauf soll dieses Feature einem größeren Kreis von Nutzern zur Verfügung gestellt werden.

Beim ersten Content Independence Day vor einem Jahr hat Cloudflare die erste Version von Pay Per Crawl eingeführt, damit Verlage und Publisher KI-Unternehmen das Durchsuchen ihrer Inhalte in Rechnung stellen können. Jetzt entwickelt Cloudflare Pay Per Crawl zu Pay Per Use weiter. Damit werden Verleger und Publisher nicht nur bezahlt, wenn ihre Inhalte abgerufen werden, sondern auch, wenn damit tatsächlicher Wert geschaffen wird. Das Unternehmen arbeitet mit führenden Partnern wie Ceramic.ai und You.com daran, aus diesem Prinzip einen funktionierenden Markt zu machen. Mit Ceramic.ai werden Verlage und Publisher, die sich dafür entscheiden, jedes Mal bezahlt, wenn ihre Inhalte in den KI-Suchergebnissen von Ceramic auftauchen. Außerdem werden ihnen die Anfragen, Zitate und das Ranking vorgelegt. Andere KI-Unternehmen können das Modell integrieren, das am besten zu ihrer Arbeitsweise passt. You.com beispielsweise ermöglicht es einem Agenten, nach Bedarf für einen bestimmten benötigten Premium-Inhalt zu bezahlen, während Cloudflare die gemeinsame Grundlage dafür bereitstellt.

Ein Jahr Content Independence: Was bislang eingeführt wurde

Im vergangenen Jahr stand beim Content Independence Day die Verteidigung im Vordergrund. Es ging darum, Ihnen die Werkzeuge an die Hand zu geben, mit denen Sie die Kontrolle über Ihre Daten zurückgewinnen können. In den letzten zwölf Monaten hat Cloudflare intensiv an dem Aufbau der Infrastruktur gearbeitet, die Voraussetzung dafür ist, dass aus bloßem Schutz echte Handlungsfähigkeit werden kann. Die heutige angekündigten Neuerungen stellen den Höhepunkt dieses Fundaments dar. Geboten werden drei Säulen für ein nachhaltiges Ökosystem: Kontrolle, Transparenz und Monetarisierung. Im letzten Jahr haben wir AI Crawl Control auf den Markt gebracht, womit ein genehmigungsbasiertes Modell für das KI-Crawling eingeführt wurde. Für eine stärkere Verbreitung dieser Schutzvorkehrungen hat Cloudflare sich mit Plattformen wie beehiiv zusammengetan, um sowohl unabhängigen Schöpferinnen und Schöpfern als auch großen Medienunternehmen fein justierbare Dashboards bereitzustellen, mit denen sie die KI-Modelle ihrer Wahl einfach nachverfolgen, sperren oder zulassen können. Um die Interaktionen von Agenten grundlegend abzusichern, hat Cloudflare außerdem die Entwicklung von Web Bot Auth angeführt. Dabei handelt es sich um ein offenes Framework, mit dem KI-Bots und autonome Shopping-Agenten ihre Identität und Legitimität gegenüber Verlagen, Publishern und Händlern nachweisen können. Zudem hat Cloudflare für die gerade entstehende agentenbasierte Wirtschaft gemeinsam mit führenden Zahlungsdienstleistern die Weichen für eine Zahlungsinfrastruktur gestellt. Direkt auf Web Bot Auth aufbauend hilft Cloudflare ihnen dabei, dafür zu sorgen, dass KI-Shopping-Agenten weltweit bei Millionen von Händlern ohne Preisgabe unverschlüsselter Anmeldedaten sicher Transaktionen durchführen können. Letztlich wird mithilfe dieser Initiativen die Grundlage für eine nachhaltige agentenbasierte Wirtschaft entwickelt und gewährleistet, dass die nächste Internet-Ära auf Transparenz, Auffindbarkeit und fairer Vergütung beruht.

Führende Verlage, Publisher und KI-Unternehmen unterstützen das agentenbasierte Internet

• beehiiv: „Wir treten in ein neues Zeitalter ein, in dem die Auffindbarkeit von Inhalten völlig neu definiert wird. Unabhängige Urheberinnen und Urheber verdienen es, bei diesem Wandel ganz vorn mit dabei zu sein. In Zukunft geht es darum, ihnen die Kontrolle über ihre Inhalte und ihr Publikum zu geben. Wir möchten den Autorinnen und Autoren das Zepter in die Hand geben, damit sie problemlos in das neue, agentenbasierte Internet einsteigen, ihre Sichtbarkeit in den Antwortmaschinen der nächsten Generation maximieren und ihr Publikum nach ihren eigenen Vorstellungen aktiv vergrößern können.“ – Tyler Denk, CEO
• Ceramic.ai: „Um zukunftsfähige KI-Suche zu skalieren, brauchen wir einen Partner mit enormer Reichweite, der sich wie wir für Transparenz und eine faire Vergütung einsetzt. Mithilfe von Cloudflare können wir unsere Geschäftsabläufe auf unkomplizierte und programmatische Weise skalieren. Durch die Einbindung unseres Pay-per-Query-Modells in das Cloudflare-Netzwerk stellen wir sicher, dass Millionen von Urheberinnen und Urhebern jedes Mal, wenn ihre Inhalte in unseren Suchergebnissen erscheinen, reibungslos dafür vergütet werden.“ – Anna Patterson, Gründerin und CEO
• Condé Nast: „Im vergangenen Jahr hat Cloudflare sich weiter dafür eingesetzt, dass Premium-Publisher wie Condé Nast, die maßgebliche Inhalte für das KI-Ökosystem liefern, dafür auch bezahlt werden. Das Unternehmen bietet uns marktführende technische Infrastruktur und denkt gemeinsam mit uns darüber nach, was als Nächstes kommt.“ – Geoff Campbell, SVP Strategy & Business Development
• Patreon: „KI-Agenten werden immer leistungsfähiger und beliebter. Urheberinnen und Urheber verdienen es, ein wesentliches Mitspracherecht dabei zu haben, wie ihre Arbeit von KI-Unternehmen genutzt wird. Größtenteils müssen Urheberinnen und Urheber im Internet akzeptieren, dass ihre Arbeit für das Training von KI genutzt wird, um überhaupt ein Publikum erreichen und dieses vergrößern zu können. Patreon verfolgt eine andere Vision: Kreative Köpfe sollten in der Lage sein, mehr Menschen zu erreichen und die Kontrolle darüber zu behalten, wie ihre Arbeit genutzt wird. Deshalb arbeiten wir weiter mit Cloudflare zusammen, um bekannte KI-Trainings-Crawler auf Netzwerkschicht bei Patreon zu blockieren. Gleichzeitig lassen wir die Crawler zu, die den Urheberinnen und Urhebern helfen, entdeckt zu werden und ihre Geschäftsaktivität durch Suchmaschinen auszubauen.“ – Drew Rowny, SVP of Product

Mehr über die Vision von Cloudflare erfahren Sie hier:

• Blog-Beitrag: Ein Jahr nach dem Content Independence Day: Aufbau des Geschäftsmodells für ein agentenbasiertes Internet
• Blog-Beitrag: Ihre Website, Ihre Regeln – Neue KI-Traffic-Optionen für alle Kunden
• Blog-Beitrag: Crawling mit Attribution Business Insights enthüllen
• Blog-Beitrag: KI-Suche smarter gestalten

Über Cloudflare

Cloudflare, Inc. (NYSE: NET) ist der führende Anbieter im Bereich Connectivity Cloud. Mit Cloudflare können Unternehmen ihre Mitarbeitenden, Anwendungen und Netzwerke noch besser schützen, deren Performance steigern und gleichzeitig Komplexität und Kosten verringern. Die Connectivity Cloud von Cloudflare bietet die umfassendste Plattform für cloudnative Produkte und Entwicklertools auf dem Markt. Damit kann sich jedes Unternehmen die für die Arbeit, die Produktentwicklung und schnellere Geschäftserfolge erforderliche Kontrolle verschaffen.
Aufbauend auf einem der größten und am stärksten verflochtenen Netzwerke der Welt schirmt Cloudflare Kunden täglich vor Milliarden von Online-Bedrohungen ab. Millionen von Organisationen vertrauen auf Cloudflare – von den größten Marken über Existenzgründerinnen und -gründer, kleine und mittelständische Betriebe bis hin zu gemeinnützigen Einrichtungen, Hilfsorganisationen und Behörden auf der ganzen Welt.
Näheres über die Connectivity Cloud von Cloudflare erfahren Sie unter cloudflare.com/de-de/connectivity-cloud. Tiefere Einblicke in aktuelle Internettrends und -erkenntnisse erhalten Sie bei radar.cloudflare.com.

Cloudflare folgen: Blog | X | LinkedIn | Facebook | Instagram

Zukunftsgerichtete Aussagen

Diese Pressemitteilung enthält zukunftsgerichtete Aussagen im Sinne von Abschnitt 27A des „Securities Act of 1933“ der Vereinigten Staaten in seiner geänderten Fassung und Abschnitt 21E des „Securities Exchange Act of 1934“ der Vereinigten Staaten in seiner geänderten Fassung, die mit erheblichen Risiken und Unsicherheiten behaftet sind. In einigen Fällen lassen sich zukunftsgerichtete Aussagen daran erkennen, dass sie Wörter wie „können“, „werden“, „sollten“, „erwarten“, „erkunden“, „planen“, „voraussehen“, „könnten“, „beabsichtigen“, „anstreben“, „prognostizieren“, „erwägen“, „glauben“, „schätzen“, „vorhersagen“, „potenziell“ oder „fortsetzen“ oder die Verneinung dieser Wörter oder ähnliche Begriffe oder Ausdrücke enthalten, die sich auf unsere Erwartungen, Strategien, Pläne oder Absichten beziehen. Allerdings enthalten nicht alle zukunftsgerichteten Aussagen diese Signalwörter. Unter zukunftsgerichteten Aussagen, die in dieser Pressemitteilung direkt oder indirekt getätigt werden, sind unter anderem Aussagen über die Funktionen und die Effektivität von Bot Defaults, dem Attribution Business Insights-Dashboard, Pay Per Use und anderen Produkten und Technologien von Cloudflare, über die Vorteile, die sich für Kundinnen und Kunden von Cloudflare aus der Nutzung von Bot Defaults, dem Attribution Business Insights-Dashboard, Pay Per Use und anderen Produkten und Technologien von Cloudflare sowie der Integration von Ceramic.ai und You.com bei Produkten und Technologien von Cloudflare und der Integration von Cloudflare bei Ceramic.ai und You.com ergeben, über die potenziellen Chancen von Cloudflare, weitere Kundinnen und Kunden zu gewinnen und Verkäufe an bestehende Kundinnen und Kunden durch Produktintegrationen von Cloudflare bei Ceramic.ai und You.com auszuweiten, über den Zeitpunkt, zu dem Bot Defaults, das Attribution Business Insights-Dashboard, Pay Per Use oder damit verbundene Funktionen allgemein für alle aktuellen und potenziellen Kundinnen und Kunden von Cloudflare verfügbar sein werden, über die technologische Entwicklung, die zukünftige Betriebstätigkeit, das Wachstum, Initiativen oder Strategien von Cloudflare sowie Äußerungen unseres CEO und anderer zu verstehen. Die tatsächlichen Ergebnisse können erheblich von denjenigen abweichen, die in den zukunftsgerichteten Aussagen direkt oder indirekt angegeben wurden, was auf eine Reihe von Faktoren zurückzuführen ist – unter anderem auf die Risiken, die in den von Cloudflare bei der US-Börsenaufsicht SEC (Securities and Exchange Commission) eingereichten Unterlagen aufgeführt sind, einschließlich des Cloudflare-Quartalsberichts im Formular 10-Q, das am 8. Mai 2026 eingereicht wurde, sowie anderer Unterlagen, die Cloudflare gegebenenfalls bei der SEC einreicht.

Die in dieser Pressemitteilung getätigten zukunftsgerichteten Aussagen beziehen sich nur auf Ereignisse bis zu dem Datum, an dem sie gemacht wurden. Cloudflare übernimmt keine Verpflichtung, die in dieser Pressemitteilung getätigten zukunftsgerichteten Aussagen nachträglich zu aktualisieren, damit sie Ereignisse, Umstände, neue Informationen oder unvorhergesehene Ereignisse, die nach dem Datum dieser Pressemitteilung auftreten, berücksichtigen, sofern dies nicht gesetzlich vorgeschrieben ist. Es ist möglich, dass sich die dargelegten Pläne, Absichten oder Annahmen in den von Cloudflare getätigten zukunftsgerichteten Aussagen nicht realisieren, weshalb Sie sich nicht vorbehaltlos auf die zukunftsgerichteten Aussagen von Cloudflare verlassen sollten.

© 2026 Cloudflare, Inc. Alle Rechte vorbehalten. Cloudflare, das Cloudflare-Logo und weitere Cloudflare-Marken sind Marken und/oder eingetragene Marken von Cloudflare, Inc. in den USA und anderen Rechtsräumen. Alle anderen hier genannten Marken und Namen können Marken ihrer jeweiligen Eigentümer sein.