Cloudflare ändert die Spielregeln: KI-Bots müssen für den Zugang zu Inhalten bezahlen

Am 1. Juli 2025 hat sich das Internet radikal verändert. Das Unternehmen Cloudflare, einer der weltweit größten Anbieter von Internetinfrastruktur, startete eine Initiative, die es „Tag der inhaltlichen Unabhängigkeit“ (Content Independence Day) nannte. Diese grundlegende Änderung bringt einen völlig neuen Ansatz dafür mit sich, wie künstliche Intelligenz auf Internetinhalte zugreift.

Das Ende der Ära des kostenlosen KI-Crawlings

Matthew Prince, CEO von Cloudflare, wies in seiner Erklärung auf ein grundlegendes Problem der heutigen Internetlandschaft hin. Während Google früher für einen fairen Austausch sorgte – es kopierte Inhalte und leitete im Gegenzug Besucher auf die Websites der Urheber weiter –, stören heutige KI-Systeme diesen Austausch.

Prince zufolge ist es mit OpenAI 750-mal schwieriger, Besucher zu gewinnen, als es mit dem ursprünglichen Google der Fall war. Mit Anthropic ist es sogar 30.000-mal schwieriger. Der Grund ist einfach: Statt Originalquellen zu konsumieren, greifen Menschen immer häufiger auf von künstlicher Intelligenz erstellte Derivate zurück.

Historischer Wandel des Geschäftsmodells des Webs

Vor fast dreißig Jahren begannen zwei Studenten der Stanford University – Larry Page und Sergey Brin – mit der Arbeit an einem Forschungsprojekt namens Backrub. Daraus wurde später Google, das das grundlegende Geschäftsmodell des Webs schuf.

Die Vereinbarung, die Google mit den Urhebern von Inhalten traf, war einfach: Ihr erlaubt uns, eure Inhalte für die Suche zu kopieren, und wir schicken euch Besucher. Die Urheber konnten auf drei Arten von diesen Besuchen profitieren: durch das Einblenden von Werbung, den Verkauf von Abonnements oder einfach durch die Freude darüber, dass jemand ihre Werke konsumiert.

Google förderte dieses System aktiv. Die Suche generierte Besucherströme, das Unternehmen kaufte DoubleClick und schuf AdSense, um die Urheber bei der Werbevermarktung zu unterstützen. Außerdem übernahm es Urchin, um Google Analytics zu starten, damit die Urheber messen konnten, wer ihre Inhalte aufruft.

Das Problem heutiger KI-Systeme

Heute hat sich die Situation dramatisch verändert. Zum ersten Mal in der Geschichte geht die Zahl der Google-Suchanfragen zurück. Was ersetzt sie? Künstliche Intelligenz.

Viele Menschen wenden sich mit Fragen, die sie früher bei Google eingegeben hätten, an KI-Systeme. Es scheint, als werde die Zukunft des Webs eher wie ChatGPT aussehen als wie ein spartanisches Suchfeld mit zehn blauen Links.

Auch Google selbst hat sich verändert. Während es vor zehn Jahren eine Liste von Links präsentierte und der Erfolg darin bestand, Nutzer so schnell wie möglich von der eigenen Website wegzuleiten, bietet es heute Antworten in Infoboxen und seit Kurzem KI-Übersichten (AI Overviews), die Nutzerfragen beantworten, ohne dass diese Google.com verlassen müssen. Mit den Infoboxen wurden angeblich 75 Prozent der Anfragen beantwortet, ohne Google zu verlassen. Mit den neueren KI-Übersichten sind es noch mehr.

Cloudflare führt eine revolutionäre Lösung ein

Cloudflare ändert gemeinsam mit den meisten führenden Verlagen und KI-Unternehmen der Welt die Standardeinstellung so, dass KI-Crawler blockiert werden, sofern sie die Urheber nicht für deren Inhalte bezahlen. Diese Inhalte sind der Treibstoff, der die KI-Maschinen antreibt, und deshalb ist es nur fair, dass die Urheber dafür direkt entschädigt werden.

Doch das ist erst der Anfang. Das Unternehmen plant die Einrichtung eines Marktplatzes, auf dem sich große und kleine Urheber und KI-Unternehmen begegnen können. Besucherzahlen waren schon immer ein schlechter Maßstab für den Wert. Cloudflare ist überzeugt, dass es dies besser machen kann.

Vision eines neuen Bewertungssystems

Prince erläutert seine Vision anhand einer Metapher: „Stellen Sie sich eine KI-Maschine als einen Block Schweizer Käse vor. Neue, originelle Inhalte, die eines der Löcher im Käseblock der KI-Maschine füllen, sind wertvoller als sich wiederholende Inhalte von geringem Wert, die leider einen großen Teil des heutigen Webs dominieren.“

Cloudflare ist überzeugt, dass es nicht nur dazu beitragen wird, KI-Maschinen schneller zu verbessern, sondern möglicherweise auch ein neues goldenes Zeitalter der Erstellung hochwertiger Inhalte einleiten kann, wenn Inhalte nicht danach bewertet und vergütet werden, wie viele Besucher sie generieren, sondern danach, wie sie den Erkenntnisstand voranbringen – gemessen daran, wie stark sie die bestehenden Löcher im „Schweizer Käse“ der KI-Maschinen füllen.

Die Mission von Cloudflare besteht darin, zum Aufbau eines besseren Internets beizutragen. Prince ist stolz auf die Rolle, die sein Unternehmen bei der Entwicklung des Webs spielt. Er ist auch stolz darauf, Urhebern dabei zu helfen, sich zu behaupten und den Wert der Inhalte einzufordern, an denen sie hart gearbeitet haben.

Diese Initiative stellt einen grundlegenden Wendepunkt für die Funktionsweise des Internets dar. Sie ist ein Versuch, ein gerechteres System zu schaffen, in dem Urheber nicht nur passive Opfer des KI-Crawlings sind, sondern aktive Teilnehmer, die die Kontrolle über ihre Inhalte haben und dafür fair entschädigt werden.

Der Tag der inhaltlichen Unabhängigkeit markiert somit den Beginn einer neuen Ära, in der das Internet zu den Prinzipien des fairen Austauschs und des Respekts vor kreativer Arbeit zurückkehrt.