長年にわたり、AI企業に文章のトレーニングをやめるよう伝えるのは、各社のプライベート言語を学び、新しいクローラーを見逃していないか願うしかありませんでした。10月30, 日、その馬鹿げた作業は少し和らぎました。Google, Microsoft, とOpenAIは、すでにクローラーと通信しているサイトが共有するrobots.txt一行だけを尊重すると発表しました。その背後にあるドラフトはAnthropic, のケビン・ケリーが書いたもので、Anthropicはすでにサポート構築を始めていると述べました。サイトのオーナーはもはやGPTBot、Google-Extended、ClaudeBot、そして新たに登場する名前ごとに別々のルールを書くことはありません。代わりに、あるグループはボットではなく目的を「__usage_aiトレーニング」と名付け、実質的に「トレーニングには使わない」と言い、例えばプレスキットのような一つのフォルダを開けておく余裕を残しています。これは小さな技術的変更であり、だからこそ重要なのです。ウェブにはついに「ノー」の共通の言葉ができたのです。

しかし、祝う前に細かい文字をよく読んでください。なぜなら、この「ノー」は思ったよりも狭く、時間も遅いからです。これは利用に関する好みであり、サイトの囲いではありません。クローラーは依然として訪問でき、検索結果は削除されず、すでに収集された単語やモデルに組み込まれている単語については何も言及していません。これは将来の生成モデルの訓練、つまりモデルが学習した内容を変更するために使われるコンテンツを対象としており、チャットボットがページを引用して出す回答や、分類やランク付けだけのモデルではありません。Microsoft, 評価すべきは、その第二の線を明確に引いている唯一の企業であり、ページレベルのグラウンディング設定を別に設定し、2月1, 2027, 日からは新しい優先順位を尊重し始め、旧NoArchiveやNoCacheタグは3月1, 2027以降トレーニングやグラウンディングシグナルとしてカウントされなくなることです。Googleは共有ラインを2027, 支持し、サイトが別々に-Extendedと名付けない場合Google「Google-Extendedブロック」として扱うことを目指しています。OpenAIは今後数ヶ月以内に実装を約束していますが、日付は定められず、共有ルールとGPTBotルールが一致した場合にどちらが勝つかはまだ明言していません。そして文書自体は個別の草案であり、承認された標準ではなく、更新されない限り5月3, 2027日に期限切れとなります。したがって、今日、どのウェブサイトにも実際には何も変わっていません。私たちには4つの異なる時間帯がある約束があります。

そのギャップが私の興奮が冷めて、より難しい問いに変わるところです。デフォルトは依然として「はい」です。何も言わないサイトは、まったく好みを表明しておらず、何年も前に作られた包括的なルールはカウントされません。なぜなら、ワイルドカードがこのトークンに合わないからです。だから、その負担はいつも通りのままです。最も小さな作家、独立系ニュースルーム、robots.txtを一度も開いたことがないブロガーにかかっている一方で、大手企業は支払いもライセンスもなく、これまで発表されたどの活動でも、看板が設置された後にモデルが訓練されたことを出版社が証明する手段がない、整然とした自主的なシステムを受け取っています。共有された信号が、矛盾する十数もの信号よりも優れていることは疑いません。同意を覚えなければならないものであり、ほとんどの読者が見ることのないファイルに残され、疑いの余地が逆に流れるシステムも疑わしい。

それでも、問題が複雑すぎて名前をつけられないふりを続けるよりは、この不完全な「ノー」の方がましだと思います。共通の語彙は規範の始まりであり、規範は強制されているかどうかにかかわらず、企業が公に守れると感じるものを変えます。本当の試練は、誰が草案に署名するかではなく、誰が古い管理を機能させ、誰が正直なタイムラインを公開するか、そして次のバージョンがデフォルトをひっくり返すかどうか、つまり許可を得たままのみトレーニングを行い、誰かが拒否する方法を見つけるまでトレーニングしないかどうかです。それまでは、サイトを運営するなら、実用的な行動は退屈で価値があります。新しいラインを学び、古いクローラーのルールをそのままにし、日付に気をつけるだけです。なぜなら、 2027 の約束は今夜書かれた一文も守らないからです。そして、もし読書だけなら、出版社が今あなたに答えさせられている問いを自問してみてください。あなたが愛する文章を次のモデルに教えてほしいのか、それとも元のまま、人のために書かれた言葉のままでいてほしいのか、燃料としてではなく。その線引きはどこにあるのか、テキストファイルの丁寧な「ノー」はあなたにとって力のように感じるのか、それとも誰も尊重しない扉のサインを渡されたように感じるのか教えてください。