Läser in...

Är AI-bots värda att blockera, eller bör du tillåta dem?

TL;DR

  • AI-robotar söker igenom innehåll på webben, på samma sätt som sökrobotar gör.
  • De är en viktig del av att anskaffa data för LLM-utbildning, tillsammans med andra källor.
  • Att tillåta eller blockera en bots åtkomst beror på utgivarens prioriteringar och antagandena om hur den påverkar.

När OpenAI lanserade sin chatbot ChatGPT avslöjade de också sin webbsökare som heter GPTBot. Deras sökrobot fungerar på samma sätt som en Google-bot, och webbplatsägare kan blockera dessa sökrobotar från att komma åt deras webbplatser i robots.txt. OpenAI gav också åtkomst för att blockera deras bot. Det sägs att omkring 48 % av webbplatserna har blockerat sin åtkomst, enligt en studie av Originality.AI. Efter detta tillkännagav Google också en separat Google-Extended bot för att göra det möjligt för webbansvariga att blockera sina AI-verktyg utan att påverka deras sökrobot.

Pågående argument om AI-bots

Det har funnits ett pågående argument sedan lanseringen av ChatGPT om hur man kan dra nytta av denna förmåga att blockera några av AI-botarna från att komma åt webbplatser. Det finns inget svar som kan tillfredsställa alla intressenter över hela linjen, eftersom diskussionen kring detta är ihållande bland SEO-branschens aktörer och nästan alla onlinepublikationer. Det här är ett sekundärt ämne om huruvida blockering av dessa bots kommer att ha någon praktisk effekt, eftersom många tjänster letar igenom webben utan tillstånd.

En punkt som stöder denna tankegång är att OpenAI:s sökrobot tillkännagavs ganska sent. Företaget kan ha använt många olika metoder för att hämta data, som de kallar allmänt tillgängliga över webben. Oron är att företag kan använda bots under olika namn och under olika leverantörer, så om du blockerar en ny kan du inte ta tillbaka den data som redan har smälts av dem.

Detta har gjort det lättare för skraparwebbplatser att ta bort innehåll från just dessa bots som är tränade på din data, den mänskligt producerade. 

De vill ha ditt innehåll

Vissa kanske tror att AI-företag inte vill ha deras innehåll, och de kommer en dag att kunna producera innehåll av samma kaliber som ditt, då är detta en mycket oroande fråga för innehållscentrerade webbplatser. Detta väcker också frågor om effektiviteten och relevansen av SEO-praxis som vi har känt till. Ett annat problem kommer att vara att det kommer att finnas ett stort antal sajter som producerar samma innehåll. Så med tanke på dessa punkter kan vissa industrier blockera AI-bots i stor skala.  

Experter som föredrar att ge tillgång till sådana som ChatGPT-bots baserar sina argument på att tjänsten inte används som en sökmotor, utan den används som en assistent, särskilt för kodskapande, översättning och även innehållsskapande. De säger också att Bings marknadsandel bara har ökat med 1% sedan det integrerade ChatGPT. För tillfället säger Google att dess AI-bot är separat, men vi vet inte vad som kommer att hända i framtiden eftersom Google kommer att integrera AI i sökresultaten i framtiden.

Förespråkare säger också att allt inte handlar om chatbots att skriva innehåll, men poängen är att om de nämner ditt varumärke, enligt dem, ger situationen även ditt varumärke exponering för en bredare publik. Om du blockerar deras åtkomst förhindrar du också att dina tankar inkluderas i utbildningen av framtida LLM. Det finns dock en tron möjlighet att i framtiden kommer kloner av varumärken och produkter att genereras av samma modeller, vilket så småningom kommer att förstärka problemet med deepfake.

Hotet som AI-modeller utgör mot SEO och Google är inte som en rak konkurrent utan som ett verktyg som kan användas för att skapa innehåll i stor skala. Detta är störande för sökningen, eftersom det kommer att skapa problem för Google och Bing, och det kommer att konsumera den trafik som annars skulle konsumera det redan existerande mänskliga innehållet. Så i slutändan kommer beslutet om huruvida en bot ska tillåtas eller inte beror på en individs preferens som bloggare eller en utgivare som företag efter att ha analyserat deras prioriteringar.  

Hitta originalberättelsen här .

Varning. Informationen som tillhandahålls är inte handelsrådgivning. Cryptopolitan.com har inget ansvar för några investeringar som görs baserat på informationen på denna sida. Vi rekommenderar tron dent forskning och/eller konsultation med en kvalificerad expert innan du fattar några investeringsbeslut.

Dela länk:

Aamir Sheikh

Amir är en media-, marknadsförings- och innehållsproffs som arbetar i den digitala branschen. En veteran inom innehållsproduktion Amir är nu en entusiastisk förespråkare, analytiker och skribent för kryptovaluta.

Mest lästa

Laddar mest lästa artiklar...

Håll dig uppdaterad om kryptonyheter, få dagliga uppdateringar i din inkorg

Relaterade nyheter

Tech
Cryptopolitan
Prenumerera på CryptoPolitan