¿Vale la pena bloquear los bots de IA o deberían permitirse?

- Los bots de rastreo de IA exploran el contenido en toda la web, al igual que lo hacen los bots de búsqueda.
- Son una parte esencial para obtener datos destinados a la formación de modelos de lenguaje grande (LLM), junto con otras fuentes.
- Permitir o bloquear el acceso de un bot depende de las prioridades del editor y de las suposiciones sobre el impacto que genera.
Cuando OpenAI lanzó su chatbot ChatGPT, también reveló su rastreador web llamado GPTBot. Su rastreador funciona de la misma manera que un bot de Google, y los propietarios de sitios web pueden bloquear estos rastreadores para que accedan a sus sitios web en robots.txt. OpenAI también dio acceso para bloquear su bot. Se dice que alrededor del 48% de los sitios web han bloqueado su acceso, según un estudio de Originality.AI. Después de esto, Google también anunció un bot separado llamado Google-Extended para permitir que los webmasters bloqueen sus herramientas de IA sin afectar su bot de búsqueda.
Debate continuo sobre los bots de IA
Ha habido un debate continuo desde el lanzamiento de ChatGPT sobre cómo aprovechar la capacidad de bloquear algunos de los bots de IA para que accedan a los sitios. No hay una única respuesta que pueda satisfacer a todas las partes interesadas, ya que la discusión en torno a esto es persistente entre los jugadores de la industria SEO y casi todas las publicaciones en línea. Este es un tema secundario sobre si bloquear estos bots tendrá algún impacto práctico, ya que muchos servicios están escaneando la web sin permiso.
Un punto que apoya esta escuela de pensamiento es que el rastreador de OpenAI se anunció bastante tarde. La empresa puede haber utilizado muchos métodos diferentes para obtener datos, que llaman ampliamente disponibles en la web. Las preocupaciones son que las empresas pueden usar bots bajo diferentes nombres y de diferentes proveedores, por lo que si bloqueas uno nuevo, no puedes recuperar los datos que ya han sido digeridos por ellos.
Esto ha facilitado que los sitios raspadores generen contenido a partir de estos bots que están entrenados con tus datos, los producidos por humanos.
Quieren tu contenido
Algunos pueden creer que las empresas de IA no quieren su contenido y que un día podrán producir contenido del mismo nivel que el tuyo; si es así, este es un problema muy preocupante para los sitios centrados en el contenido. Esto también plantea preguntas sobre la efectividad y relevancia de las prácticas de SEO que conocemos. Otro problema será que habrá una gran cantidad de sitios produciendo exactamente el mismo contenido. Por lo tanto, considerando estos puntos, algunas industrias pueden bloquear a los bots de IA a gran escala.
Los expertos que favorecen proporcionar acceso a bots como ChatGPT basan su argumento en que el servicio no se utiliza como un motor de búsqueda, sino como un asistente, especialmente para la creación de código, traducción y también creación de contenido. También dicen que la cuota de mercado de Bing solo ha aumentado un 1% desde que integró ChatGPT. En este momento, Google dice que su bot de IA es independiente, pero no sabemos qué pasará en el futuro, ya que Google va a integrar IA en los resultados de búsqueda en el futuro.
Las personas a favor también dicen que no se trata solo de que los chatbots escriban contenido, sino que el punto es que si están mencionando el nombre de tu marca, según ellos, la situación también brinda a tu marca exposición a una audiencia más amplia. Además, si bloqueas su acceso, evitas que tus ideas se incluyan en el entrenamiento de futuros LLM. Sin embargo, existe una fuerte posibilidad de que en el futuro, clones de marcas y productos sean generados por estos mismos modelos, lo que eventualmente amplificará el problema de los deepfakes.
La amenaza que los modelos de IA plantean para el SEO y Google no es como un competidor directo, sino como una herramienta que puede utilizarse para crear contenido a gran escala. Esto es disruptivo para la búsqueda, ya que creará problemas para Google y Bing, y consumirá el tráfico que de otro modo consumiría el ya existente contenido humano. Así que, al final, la decisión de permitir o no a un bot depende de la preferencia de un individuo como blogger o de una empresa como editora, después de analizar sus prioridades.
Si estás leyendo esto, ya vas por delante. Mantente así con nuestro boletín.
Aviso de responsabilidad. La información proporcionada no es un consejo de trading. Cryptopolitan.com no asumimos responsabilidad alguna por las inversiones realizadas basándose en la información proporcionada en esta página. Recomendamos encarecidamente la investigación independiente y/o la consulta con un profesional calificado antes de tomar cualquier decisión de inversión.

Aamir Sheikh
Aamir es un periodista tecnológico con casi seis años de experiencia en los sectores de criptomonedas y tecnología. Se graduó de la Universidad MAJ con un MBA en Finanzas y Marketing. Ahora trabaja con Cryptopolitan, donde informa sobre los últimos desarrollos en los mercados de criptomonedas y predicciones de precios.
















