Blockieren führende Nachrichten-Websites AI-Crawler? Enthüllung der neuesten Erkenntnisse
- Die Mehrheit der führenden Nachrichtenseiten erlaubt den uneingeschränkten Zugriff von KI.
- GPTBot wurde von mehr als der Hälfte der befragten Websites blockiert.
- Verlage unterscheiden sich in ihren Strategien zur Blockierung von KI-Crawlern.
Eine von Press Gazette durchgeführte Analyse hat ergeben, dass ein erheblicher Anteil der 100 wichtigsten englischsprachigen Nachrichten-Websites Maßnahmen ergreift, um AI-Web Crawler vom Zugriff auf ihre Inhalte abzuhalten. Von den 106 untersuchten Websites hatten 45 keinerlei AI-Crawler blockiert, während die übrigen Websites unterschiedlich strenge Einschränkungen aufwiesen.
Einblicke in die Trends zur Blockierung von AI-Crawlern unter den führenden Nachrichten-Websites
Unter den befragten Nachrichten-Websites erlauben mehr als vier von zehn allen AI-Web-Crawlern, ihre Inhalte ohne jegliche Behinderung zu scrapen. Ein beträchtlicher Teil, bestehend aus 61 Websites, erhebt jedoch Einschränkungen, indem er mindestens einen AI-Bot blockiert. Bemerkenswerterweise blockieren 32 Websites zwei oder mehr AI-Crawler, wobei einige Websites sogar bis zu fünf blockieren.
An der Spitze der blockierten AI-Crawler steht GPTBot, der mit ChatGPT verbundene Web-Crawler, der von OpenAI entwickelt wurde. Erschreckende 56,6 % der befragten Websites untersagen den Zugriff auf GPTBot. Eng gefolgt wird dies von Google-Extended, einem weiteren häufig blockierten Crawler, der von Googles AI-Chatbot Gemini (früher Bard genannt) genutzt wird.
Zusätzlich stehen Crawler wie Claude-Web, Claudebot, anthropic-ai, Cohere-ai, Perplexity-ai, Seekr und Meltwater auf den befragten Websites vor unterschiedlich starken Einschränkungen.
Bemerkenswerte Ausnahmen und Inklusionen
Während einige große Verlage sich dafür entscheiden, bestimmte AI-Bots zu blockieren, entscheiden sich andere dafür, keine Einschränkungen vorzunehmen. So gewähren beispielsweise Mirror, Express, Manchester Evening News, Ladbible, Unilad und Publikationen im Rahmen der von Lebedev besessenen Independent und Evening Standard uneingeschränkten Zugang zu AI-Crawlern.
Ebenso gestattet Politico, eine Tochtergesellschaft von Axel Springer, aufgrund einer Content-Sharing-Vereinbarung mit OpenAI den Zugriff von AI-Crawlern.
Überraschenderweise enthält der Daily Beast, im Besitz von IAC, keine Blockierung von AI-Bots, obwohl der Vorsitzende des Unternehmens die Entschädigung von Verlagen durch AI-Unternehmen befürwortet. Umgekehrt entscheiden sich einige politisch konservative Websites, darunter GB News, Newsmax, Zero Hedge, Breitbart und Fox News, dafür, keine AI-Crawler zu blockieren, was von anderen Publikationen im Besitz von Murdoch abweicht.
Implikationen und zukünftige Aussichten
Die unterschiedlichen Ansätze der Nachrichtenverlage bezüglich des Zugriffs von AI-Crawlern spiegeln die anhaltende Debatte über die Nutzung von Inhalten und geistige Eigentumsrechte im digitalen Zeitalter wider. Während einige Verlage eine strenge Kontrolle über ihre Inhalte bevorzugen, um unbefugte Nutzung zu verhindern und die Kontrolle über die Verbreitung aufrechtzuerhalten, priorisieren andere die Zugänglichkeit und die Zusammenarbeit mit AI-Unternehmen zur Verbreitung von Inhalten und Innovation.
Während sich die Landschaft weiter entwickelt, bleibt abzuwarten, wie Verlage, AI-Unternehmen und Aufsichtsbehörden die komplexe Schnittstelle zwischen Technologie, Content-Eigentum und Privatsphäre der Nutzer navigieren werden.
Die Entscheidungen der Nachrichtenverlage bezüglich des Zugriffs von AI-Crawlern beeinflussen nicht nur die Verbreitung von Nachrichten, sondern prägen auch die breitere Diskussion über die Nutzung digitaler Inhalte und geistige Eigentumsrechte.
Lesen Sie nicht nur Krypto-Nachrichten. Verstehen Sie sie. Abonnieren Sie unseren Newsletter. Es ist kostenlos.
Haftungsausschluss. Die bereitgestellten Informationen stellen keine Anlageberatung dar. Cryptopolitan.com übernimmt keine Haftung für Investitionen, die auf Basis der Informationen auf dieser Seite getätigt wurden. Wir empfehlen dringend eine unabhängige Recherche und/oder Beratung durch einen qualifizierten Fachmann, bevor Sie Investitionsentscheidungen treffen.
Emman Omwanda
Emmanuel Omwandas Expertise liegt in den Kryptowährungsmärkten und umfasst sowohl fundamentale als auch technische Analysen. Er arbeitete zuvor bei verschiedenen Krypto-Medien, bevor er zu Cryptopolitan kam, darunter CoinEdition, The Crypto Basic, CryptoNews Flash und DroomDroom. Er hat einen Bachelor of Science (BSc.) in Mathematik und Informatik von der Kenyatta University in Kenia und befindet sich derzeit im letzten Jahr seines Studiums für einen Bachelor of Arts in Kommunikations- und Medienwissenschaften.
