OpenAI는 챗봇 ChatGPT를 출시했을 때 GPTBot라는 웹 크롤러도 공개했습니다. 크롤러는 Google 봇과 동일한 방식으로 작동하며 웹사이트 소유자는 이러한 크롤러가 robots.txt의 웹사이트에 액세스하지 못하도록 차단할 수 있습니다. OpenAI는 또한 봇을 차단할 수 있는 액세스 권한을 부여했습니다. Originality.AI의 연구에 따르면 약 48%의 웹사이트가 액세스를 차단했다고 합니다. 이후 Google은 웹마스터가 검색 봇에 영향을 주지 않고 AI 도구를 차단할 수 있도록 별도의 Google 확장 봇도 발표했습니다.
AI 봇에 대한 지속적인 논쟁
ChatGPT 출시 이후 일부 AI 봇의 사이트 액세스를 차단하는 기능을 활용하는 방법에 대한 지속적인 논쟁이 있었습니다. SEO 업계 관계자와 거의 모든 온라인 출판물 사이에서 이에 대한 논의가 지속되고 있기 때문에 전반적으로 모든 이해관계자를 만족시킬 수 있는 단 하나의 대답은 없습니다. 많은 서비스가 허가 없이 웹을 검색하고 있기 때문에 이는 이러한 봇을 차단하는 것이 실질적인 영향을 미칠지 여부에 대한 두 번째 주제입니다.
이러한 사고방식을 뒷받침하는 한 가지 점은 OpenAI의 크롤러가 꽤 늦게 발표되었다는 것입니다. 회사는 웹을 통해 널리 사용할 수 있는 데이터를 소스로 제공하기 위해 다양한 방법을 사용했을 수 있습니다. 우려되는 점은 기업이 다른 이름과 다른 공급업체로 봇을 사용할 수 있기 때문에 새로운 봇을 차단하면 해당 봇이 이미 소화한 데이터를 다시 가져올 수 없다는 것입니다.
이로 인해 스크래퍼 사이트는 인간이 생성한 데이터에 대해 교육을 받은 바로 그 봇에서 콘텐츠를 대량 생산하는 것이 더 쉬워졌습니다.
그들은 당신의 콘텐츠를 원합니다
어떤 사람들은 AI 회사가 자신들의 콘텐츠를 원하지 않고 언젠가는 귀하와 동일한 수준의 콘텐츠를 생산할 수 있을 것이라고 믿을 수도 있습니다. 그렇다면 이는 콘텐츠 중심 사이트에 매우 우려되는 문제입니다. 이는 또한 우리가 알고 있는 SEO 관행의 효율성과 관련성에 대한 의문을 제기합니다. 또 다른 문제는 동일한 콘텐츠를 생산하는 사이트가 너무 많다는 것입니다. 따라서 이러한 점을 고려하여 일부 산업에서는 AI 봇을 대규모로 차단할 수도 있습니다.
ChatGPT 봇과 같은 서비스에 대한 액세스 제공을 선호하는 전문가들은 이 서비스가 검색 엔진으로 사용되지 않고 특히 코드 생성, 번역 및 콘텐츠 생성을 위한 보조자로 사용된다는 근거를 바탕으로 주장합니다. 그들은 또한 ChatGPT를 통합한 이후 Bing의 시장 점유율이 1%만 증가했다고 말합니다. 현재 구글은 자사 AI봇이 별개라고 밝혔지만, 앞으로 구글이 AI를 검색결과에 통합할 예정이어서 앞으로 어떻게 될지는 알 수 없다.
챗봇 이 전부는 아니지만 , 귀사의 브랜드 이름을 언급하는 경우 상황이 귀사의 브랜드를 더 많은 청중에게 노출시킬 수 있다는 것이 요점이라고 말합니다. 또한 해당 액세스를 차단하면 향후 LLM 교육에 귀하의 생각이 포함되지 않습니다. 그러나 미래에는 브랜드와 제품의 복제물이 동일한 모델에 의해 생성될 가능성이 tron
AI 모델이 SEO와 Google에 가하는 위협은 직접적인 경쟁자가 아니라 대규모 콘텐츠를 만드는 데 사용할 수 있는 도구입니다. 이는 Google과 Bing에 문제를 일으키고 기존의 인간 콘텐츠를 소비하는 트래픽을 소비하므로 검색에 지장을 줍니다. 그래서 결국 봇을 허용할지 말지의 결정은 블로거인 개인이나 기업인 퍼블리셔의 우선순위를 분석한 후 선호하는 것으로 귀결됩니다.
여기에서 원본 이야기를 찾아보세요 .
