Wird geladen...

Lohnt es sich, KI-Bots zu blockieren, oder sollten Sie sie zulassen?

TL;DR

  • KI-Crawler-Bots durchsuchen Inhalte im Web, genau wie Such-Bots.
  • Sie sind neben anderen Quellen ein wesentlicher Bestandteil der Datenbeschaffung für die LLM-Ausbildung.
  • Das Zulassen oder Blockieren des Zugriffs eines Bots hängt von den Prioritäten des Herausgebers und den Annahmen über die Auswirkungen ab, die er hat.

Als OpenAI seinen Chatbot ChatGPT startete, stellten sie auch ihren Webcrawler namens GPTBot vor. Ihr Crawler funktioniert auf die gleiche Weise wie ein Google-Bot, und Websitebesitzer können diesen Crawlern den Zugriff auf ihre Websites in robots.txt blockieren. OpenAI gewährte auch Zugriff zum Blockieren ihres Bots. Laut einer Studie von Originality.AI haben rund 48 % der Websites ihren Zugriff blockiert. Danach kündigte Google auch einen separaten Google-Extended-Bot an, um Webmastern die Blockierung ihrer KI-Tools zu ermöglichen, ohne dass dies Auswirkungen auf ihren Suchbot hat.

Anhaltender Streit über KI-Bots

Seit der Einführung von ChatGPT gibt es einen anhaltenden Streit darüber, wie man diese Fähigkeit nutzen kann, einige der KI-Bots am Zugriff auf Websites zu hindern. Es gibt keine Antwort, die alle Beteiligten auf ganzer Linie zufriedenstellen kann, da die Diskussion darüber unter den Akteuren der SEO-Branche und fast allen Online-Publikationen hartnäckig ist. Dies ist ein zweitrangiges Thema, ob das Blockieren dieser Bots praktische Auswirkungen haben wird, da viele Dienste das Internet ohne Erlaubnis durchsuchen.

Ein Punkt, der diese Denkrichtung unterstützt, ist, dass der Crawler von OpenAI ziemlich spät angekündigt wurde. Das Unternehmen hat möglicherweise viele verschiedene Methoden verwendet, um Daten zu beschaffen, die seiner Meinung nach im Internet allgemein verfügbar sind. Die Bedenken bestehen darin, dass Unternehmen Bots unter verschiedenen Namen und von verschiedenen Anbietern verwenden können. Wenn Sie also einen neuen Bot blockieren, können Sie die Daten, die bereits von ihnen verarbeitet wurden, nicht zurücknehmen.

Dadurch ist es für Scraper-Websites einfacher geworden, Inhalte von genau diesen Bots zu produzieren, die auf Ihren Daten, also den von Menschen erstellten Daten, trainiert sind. 

Sie wollen Ihre Inhalte

Einige glauben vielleicht, dass KI-Unternehmen ihre Inhalte nicht wollen und sie eines Tages in der Lage sein werden, Inhalte der gleichen Qualität wie Ihre zu produzieren. Dann ist dies ein sehr besorgniserregendes Problem für inhaltsorientierte Websites. Dies wirft auch Fragen zur Wirksamkeit und Relevanz der uns bekannten SEO-Praktiken auf. Ein weiteres Problem wird sein, dass es eine große Anzahl von Websites geben wird, die genau die gleichen Inhalte produzieren. In Anbetracht dieser Punkte könnten einige Branchen KI-Bots in großem Umfang blockieren.  

Experten, die den Zugriff auf ChatGPT-Bots befürworten, argumentieren damit, dass der Dienst nicht als Suchmaschine, sondern als Assistent, insbesondere bei der Codeerstellung, Übersetzung und auch bei der Erstellung von Inhalten, genutzt wird. Sie sagen auch, dass der Marktanteil von Bing seit der Integration von ChatGPT nur um 1 % gestiegen sei. Derzeit sagt Google, dass sein KI-Bot separat sei, aber wir wissen nicht, was in Zukunft passieren wird, da Google in Zukunft KI in die Suchergebnisse integrieren wird.

Die Befürworter sagen auch, dass es nicht nur darum geht, Inhalte zu schreiben, aber der Punkt ist, dass, wenn sie Ihren Markennamen erwähnen, Ihrer Meinung nach die Situation Ihre Marke auch einem breiteren Publikum bekannt macht. Wenn Sie ihren Zugriff blockieren, verhindern Sie außerdem, dass Ihre Gedanken in die Ausbildung zukünftiger LLMs einbezogen werden. Es besteht jedoch eine tron Wahrscheinlichkeit, dass in Zukunft Klone von Marken und Produkten von denselben Modellen erstellt werden, was das Deepfake-Problem letztendlich verstärken wird.

Die Bedrohung, die KI-Modelle für SEO und Google darstellen, besteht nicht als direkte Konkurrenz, sondern als Werkzeug, mit dem Inhalte in großem Maßstab erstellt werden können. Dies ist störend für die Suche, da es Google und Bing Probleme bereitet und den Datenverkehr verbraucht, der andernfalls die bereits vorhandenen menschlichen Inhalte verbrauchen würde. Letztendlich hängt die Entscheidung, ob ein Bot zugelassen wird oder nicht, von der Präferenz einer Einzelperson als Blogger oder eines Herausgebers als Unternehmen nach einer Analyse ihrer Prioritäten ab.  

Die Originalgeschichte finden Sie hier .

Haftungsausschluss. Die bereitgestellten Informationen sind keine Handelsberatung. Cryptopolitan.com haftet nicht für Investitionen, die auf der Grundlage der auf dieser Seite bereitgestellten Informationen getätigt wurden. Wir tron dringend unabhängige dent und/oder Beratung durch einen qualifizierten Fachmann, bevor Sie Anlageentscheidungen treffen.

Einen Link teilen:

Aamir Scheich

Amir ist ein Medien-, Marketing- und Content-Experte, der in der digitalen Branche arbeitet. Ein Veteran in der Content-Produktion Amir ist jetzt ein begeisterter Befürworter, Analyst und Autor von Kryptowährungen.

Meist gelesen

Die meisten gelesenen Artikel werden geladen...

Bleiben Sie über Krypto-Neuigkeiten auf dem Laufenden und erhalten Sie tägliche Updates in Ihrem Posteingang

Ähnliche Neuigkeiten

Technik
Kryptopolitan
Abonnieren Sie CryptoPolitan