OpenAIはチャットボット「ChatGPT」をリリースした際に、「GPTBot」と呼ばれるウェブクローラーも公開しました。このクローラーはGoogleボットと同様に動作し、ウェブサイト所有者はrobots.txtを使用してこれらのクローラーによるウェブサイトへのアクセスをブロックできます。OpenAIは、ボットをブロックするためのアクセス権も提供しています。Originality.AIの調査によると、約48%のウェブサイトがアクセスをブロックしていると言われています。その後、Googleは、ウェブマスターが検索ボットに影響を与えずにAIツールをブロックできるように、Google拡張ボットも発表しました。
AIボットに関する継続的な議論
ChatGPTのリリース以来、一部のAIボットによるサイトへのアクセスをブロックするこの機能をどのように活用するかについて、議論が続いています。SEO業界の関係者やほぼすべてのオンラインパブリケーションでこの問題に関する議論が続いているため、関係者全員を納得させるような単一の答えは存在しません。多くのサービスが許可なくウェブを閲覧しているため、これらのボットをブロックすることで実際にどのような影響があるかという問題は、二次的な問題です。
この考え方を裏付ける点の一つは、OpenAIのクローラーがかなり遅れて発表されたことです。同社は、Web上で広く利用可能だとするデータを取得するために、様々な方法を用いていた可能性があります。懸念されるのは、企業が異なる名前やベンダーの下でボットを使用できることです。そのため、新しいボットをブロックすると、既に取得済みのデータを取り戻すことができなくなるのです。
これにより、スクレーパー サイトは、人間が作成したデータに基づいてトレーニングされたこれらのボットからコンテンツを大量生成することが容易になりました。
彼らはあなたのコンテンツを求めています
AI企業は自社のコンテンツを必要としておらず、いつかは自社と同等のコンテンツを制作できるようになるだろうと考える人もいるかもしれません。これはコンテンツ中心のサイトにとって非常に懸念すべき問題です。また、従来のSEO対策の有効性と妥当性にも疑問が生じます。さらに、全く同じコンテンツを制作するサイトが多数存在するようになるという問題もあります。これらの点を考慮すると、一部の業界ではAIボットを大規模にブロックする動きが出てくるかもしれません。
ChatGPTボットのようなサービスへのアクセス提供を支持する専門家は、このサービスが検索エンジンとしてではなく、特にコード作成、翻訳、コンテンツ作成などのアシスタントとして利用されていることを根拠に主張しています。また、ChatGPTを統合して以来、Bingの市場シェアはわずか1%しか増加していないとも指摘しています。現時点では、Googleは自社のAIボットは独立したものだと主張していますが、将来的にはGoogleが検索結果にAIを統合する予定であるため、今後どうなるかは不明です。
賛成派は、 チャットボットがコンテンツを作成することだけが問題ではないと述べており、重要なのは、チャットボットがあなたのブランド名に言及することで、より幅広い層にブランドをアピールできるという点だと主張しています。また、チャットボットのアクセスをブロックすれば、あなたの考えが将来のLLM（法務修士）のトレーニングに利用されるのを防ぐことができます。しかし、tronフェイク問題がさらに深刻化する可能性も十分にあります。
AIモデルがSEOとGoogleにもたらす脅威は、直接的な競合相手としてではなく、大規模なコンテンツ作成に利用できるツールとしてです。これは検索にとって破壊的なものであり、GoogleとBingに問題を引き起こし、本来であれば既存の 人間によるコンテンツでしょう。したがって、最終的には、ボットを許可するかどうかの判断は、ブロガー個人、あるいは出版社企業それぞれの優先順位を分析した上での判断に委ねられることになります。
