Vale la pena bloccare i bot AI o dovresti consentirli?

Quando OpenAI ha lanciato il suo chatbot ChatGPT, ha anche rivelato il suo crawler web chiamato GPTBot. Il suo crawler funziona allo stesso modo di un bot di Google, e i proprietari di siti web possono bloccare questi crawler dall'accedere ai loro siti tramite robots.txt. OpenAI ha anche fornito la possibilità di bloccare il proprio bot. Si dice che circa il 48% dei siti web abbia bloccato il loro accesso, secondo uno studio di Originality.AI. Dopo questo, Google ha anche annunciato un bot separato chiamato Google-Extended per consentire ai webmaster di bloccare i loro strumenti AI senza influenzare il loro bot di ricerca.

Discussione in corso sui bot AI

C'è stata una discussione continua dal lancio di ChatGPT su come trarre vantaggio dalla possibilità di bloccare alcuni dei bot AI dall'accedere ai siti. Non esiste una risposta unica che possa soddisfare tutte le parti interessate, poiché la discussione su questo tema è persistente tra i giocatori del settore SEO e quasi tutte le pubblicazioni online. Questo è un argomento secondario su se il blocco di questi bot avrà un impatto pratico, poiché molti servizi stanno setacciando il web senza autorizzazione.

Un punto che sostiene questa scuola di pensiero è che il crawler di OpenAI è stato annunciato piuttosto tardi. L'azienda potrebbe aver utilizzato molti metodi diversi per reperire i dati, che definisce ampiamente disponibili sul web. Le preoccupazioni sono che le aziende possano utilizzare bot sotto nomi diversi e sotto diversi fornitori, quindi se blocchi un nuovo bot, non puoi recuperare i dati che sono già stati elaborati da loro.

Questo ha reso più facile per i siti scraper generare contenuti da questi bot addestrati sui tuoi dati, quelli prodotti dagli esseri umani. 

Vogliono i tuoi contenuti

Alcuni potrebbero credere che le aziende AI non vogliano i loro contenuti e che un giorno saranno in grado di produrre contenuti dello stesso calibro dei tuoi, e questo è un problema molto preoccupante per i siti incentrati sui contenuti. Questo solleva anche domande sull'efficacia e sulla rilevanza delle pratiche SEO che conosciamo. Un altro problema sarà che ci sarà un gran numero di siti che producono gli stessi contenuti. Quindi, considerando questi punti, alcuni settori potrebbero bloccare i bot AI su larga scala. 

Gli esperti che favoriscono l'accesso a servizi come i bot di ChatGPT basano il loro argomento sul fatto che il servizio non è utilizzato come motore di ricerca, ma come assistente, specialmente per la creazione di codice, traduzione e anche creazione di contenuti. Dicono anche che la quota di mercato di Bing è aumentata solo dell'1% dall'integrazione di ChatGPT. Al momento, Google afferma che il suo bot AI è separato, ma non sappiamo cosa accadrà in futuro poiché Google integrerà l'AI nei risultati di ricerca in futuro.

Le persone favorevoli dicono anche che non si tratta solo di chatbot che scrivono contenuti, ma il punto è che se menzionano il nome del tuo brand, secondo loro, la situazione dà anche al tuo brand esposizione a un pubblico più ampio. Inoltre, se blocchi il loro accesso, impedischi che i tuoi pensieri vengano inclusi nell'addestramento di futuri LLM. Tuttavia, c'è una forte possibilità che in futuro, cloni di brand e prodotti verranno generati da questi stessi modelli, il che alla fine amplificherà il problema del deepfake.

La minaccia che i modelli AI pongono per la SEO e Google non è quella di un concorrente diretto, ma di uno strumento che può essere utilizzato per creare contenuti su larga scala. Questo è disruptive per la ricerca, poiché creerà problemi per Google e Bing, e consumerà il traffico che altrimenti consumerebbe l'contenuto umano già esistente. Quindi, alla fine, la decisione di consentire o meno un bot dipende dalla preferenza di un individuo come blogger o editore come azienda dopo aver analizzato le loro priorità.