Jahrelang bedeutete es, AI Firmen zu sagen, sie sollen nicht an deinem Schreiben trainieren, dass man die private Sprache jedes Unternehmens lernte und hoffte, dass man keinen neuen Crawler verpasst hatte. Am 30, . Oktober wurde diese absurde Aufgabe etwas weniger absurd: Google, Microsoft, und OpenAI sagten, sie würden eine gemeinsame Zeile in robots.txt respektieren, die kleine Datei, in der eine Seite bereits mit Crawlern spricht, und der Entwurf dahinter wurde von Kevin Kelley von Anthropic, geschrieben, der sagte, Anthropic habe bereits begonnen, Unterstützung aufzubauen. Ein Seitenbetreiber würde keine separaten Regeln mehr für GPTBot, Google-Extended, ClaudeBot und jeden neuen Namen schreiben; stattdessen nennt eine Gruppe einen Zweck statt eines Bots, __usage_ai-training, und sagt im Grunde, man soll dies nicht für Training nutzen, mit Platz, um einen einzelnen Ordner offen zu lassen, zum Beispiel ein Pressekit. Es ist eine kleine technische Änderung, und genau deshalb ist es wichtig: Das Web hat endlich ein gemeinsames Wort für Nein.

Aber lies das Kleingedruckte, bevor du feierst, denn dieses Nein ist enger gefasst, als es klingt, und langsamer. Es ist eine Vorliebe für die Nutzung, kein Zaun um die Seite: Crawler können weiterhin besuchen, Suchergebnisse werden nicht entfernt, und es steht nichts über bereits gesammelte oder in ein Modell eingearbeitete Wörter. Es umfasst zukünftiges Training generativer Modelle, also Inhalte, die dazu dienen, das Gelernte eines Modells zu verändern, nicht die Antworten, die ein Chatbot durch Zitate einer Seite gibt, und nicht Modelle, die nur klassifizieren oder rangieren. Microsoft, zu seiner Ehre ist das eine Unternehmen, das diese zweite Linie klar zieht, mit einer separaten Seitenebene-Grounding-Präferenz, und es wird ab Februar 1, 2027, beginnen, die neuen Präferenzen zu respektieren, während es crawlt, während die alten NoArchive- und NoCache-Tags nach März 1, 2027nicht mehr als Trainings- oder Erdungssignale zählen. Google strebt an, die gemeinsame Linie zu unterstützen, indem 2027, sie als Google-Erweiterter Block behandelt, wenn eine Seite Google-Erweitert nicht separat nennt. OpenAI verspricht eine Umsetzung in den kommenden Monaten, ohne Datum und noch ohne zu sagen, was gewinnt, wenn die gemeinsame Regel und die GPTBot-Regel nicht übereinstimmen. Und das Dokument selbst ist ein individueller Entwurf, kein anerkannter Standard, der am 3, 2027. Mai abläuft, sofern es nicht aktualisiert wird. Heute hat sich auf keiner Website tatsächlich etwas geändert. Wir haben ein Versprechen mit vier verschiedenen Uhren.

Diese Lücke ist der Punkt, an dem meine Begeisterung in eine schwierigere Frage umschlägt. Der Standard ist immer noch ja. Eine Seite, die nichts sagt, hat keinerlei Präferenz geäußert, und eine vor Jahren geschriebene allgemeine Regel zählt nicht, weil eine Wildcard nicht zu diesem Token passt. Die Last bleibt also genau dort, wo sie immer lag: beim kleinsten Autor, der unabhängigen Redaktion, dem Blogger, der nie robots.txt eröffnet hat, während die größten Unternehmen ein ordentliches, freiwilliges System ohne Zahlung, ohne Lizenzierung und bei allen bisher angekündigten Möglichkeiten bekommen, dass ein Modell nach dem Schild trainiert wurde. Ich bezweifle nicht, dass ein gemeinsames Signal besser ist als ein Dutzend widersprüchliches. Ich bezweifle ein System, bei dem man lernen muss, Einwilligung zurückzuhalten, in einer Datei, die die meisten Leser nie sehen werden, während der Zweifel in die andere Richtung fließt.

Dennoch hätte ich lieber dieses unvollkommene Nein als ein weiteres Jahr, in dem ich so tue, als sei das Problem zu kompliziert, um es zu benennen. Ein gemeinsamer Wortschatz beginnt mit Normen, und Normen, ob durchgesetzt oder nicht, verändern, was Unternehmen öffentlich verteidigen können. Der eigentliche Test wird nicht sein, wer den Entwurf unterschreibt, sondern wer die alten Kontrollen am Laufen hält, wer ehrliche Zeitpläne veröffentlicht und ob die nächste Version dieser Idee es wagt, den Standard umzukehren: Training nur mit Erlaubnis, nicht Training, bis jemand herausfindet, wie man ablehnt. Bis dahin ist der praktische Schritt langweilig und lohnenswert, wenn man eine Seite betreibt: Lerne die neue Zeile, behalte deine alten Crawler-Regeln und beobachte die Daten, denn ein Versprechen für 2027 schützt keinen einzigen Satz, der heute Abend geschrieben wurde. Und wenn du nur liest, stell dir die Frage, die Verlage jetzt für dich beantworten müssen: Willst du, dass die Texte, die du liebst, das nächste Modell lehrt, oder soll sie genau so bleiben, wie sie waren: Worte für Menschen geschrieben, nicht für Treibstoff? Sag mir, wo du diese Grenze ziehst und ob ein höfliches Nein in einer Textdatei für dich wie Macht wirkt oder wie ein Schild für eine Tür, die niemand zu respektieren versprochen hat.