Las empresas de IA protestan por la prohibición de Cloudflare de que los bots de IA extraigan contenido por defecto
- Cloudflare bloqueará ahora de forma predeterminada a los rastreadores de IA, otorgando a los propietarios de sitios web mayor control sobre cómo se accede y utiliza su contenido.
- La medida introduce un mercado de «Pago por Rastreo» donde las empresas de IA deben compensar a los editores para acceder a los datos.
- Los principales editores apoyan este cambio, ya que bots de IA como los de OpenAI han extraído contenido en gran escala con poco tráfico de retorno.
Cloudflare, la empresa de infraestructura de Internet responsable de enrutar aproximadamente el 20% del tráfico web global, ha anunciado que comenzará a bloquear los rastreadores de inteligencia artificial (IA) por defecto.
El cambio, efectivo el martes, modifica la forma en que se permitirá a las empresas de IA acceder al contenido alojado en la web después de que los editores exigieran más control y compensación por sus datos.
La red de entrega de contenido (CDN) ayuda a los sitios web a almacenar en caché y servir datos más cerca de los usuarios. Con esta nueva política, cualquier nuevo dominio que se registre para los servicios de Cloudflare se le pedirá que decida cuándo y si bots de IA puede acceder a su contenido, o pueden elegir bloquear los raspadores por completo.
Cloudflare lanza herramientas para controlar el acceso de la IA
El cambio se suma a las iniciativas anteriores de Cloudflare para dar a los editores más control sobre sus datos. El año pasado, la compañía introdujo una solución de un clic para bloquear todos los bots de IA conocidos y un panel de control para monitorear la actividad de los rastreadores. Los propietarios de sitios utilizan la herramienta para distinguir entre rastreadores que extraen datos para entrenamiento de IA, fines de búsqueda u otros usos.
El anuncio del martes formaliza esas protecciones y las aplica por defecto. “Los rastreadores de IA han estado extrayendo contenido sin límites. Nuestro objetivo es devolver el poder a las manos de los creadores, mientras aún ayudamos a las empresas de IA a innovar”, dijo el CEO de Cloudflare, Matthew Prince, en un comunicado publicado hoy.
Según los registros de la empresa, el sistema Pay per Crawl de Cloudflare, la base de esta iniciativa, es un mercado donde las empresas de IA y los propietarios de contenido pueden acordar una compensación por acceso.
Ambas partes deben tener cuentas de Cloudflare y, una vez configuradas, pueden negociar precios y términos para las actividades de rastreo web. Cloudflare actúa como intermediario en la transacción, cobrando a la empresa de IA y pasando las ganancias al editor.
Los desarrolladores de IA lamentan el limitado acceso a sitios web
Varios desarrolladores de IA, incluyendo OpenAI, la firma de inteligencia artificial respaldada por Microsoft detrás de ChatGPT, se han negado a participar en el programa. En un reciente comunicado público, la empresa criticó a Cloudflare por insertar un nuevo intermediario entre los editores y los desarrolladores de IA.
OpenAI mencionó que tiene un historial de honorar el protocolo robots.txt, un archivo que permite a los operadores de sitios web controlar el acceso de los rastreadores, e insistió en que respeta las preferencias del sitio.
En un análisis de junio, Cloudflare afirma haber encontrado una brecha entre la frecuencia de raspado y las referencias de tráfico. El rastreador de Google, por ejemplo, accedió a los sitios web 14 veces por cada visita que envió de vuelta. En comparación, el bot de OpenAI raspó los sitios 17.000 veces por cada referencia.
El abogado tecnológico británico Matthew Holman dijo a CNBC que los rastreadores de IA pueden ser intrusivos y potencialmente perjudiciales para la experiencia del usuario.
“Se les ha acusado de abrumar los sitios web y afectar significativamente la experiencia del usuario,» dijo dijo. Holman añadió que si el sistema de Cloudflare funciona como se pretende, podría debilitar la capacidad de los chatbots de IA para recopilar y entrenar con datos web a gran escala.
Los editores se unen a Cloudflare
Las principales empresas de medios apoyan los esfuerzos de Cloudflare para recuperar el control sobre el contenido digital. Editores, incluidos TIME, The Associated Press, Conde Nast, The Atlantic, ADWEEK y Fortune, han acordado bloquear los bots de IA por defecto.
Los medios de comunicación han estado aceptando el raspado de datos de plataformas como Google a cambio de tráfico e ingresos publicitarios. Pero el ecosistema actual impulsado por la IA no tiene tal reciprocidad. Para muchos, las plataformas de IA como ChatGPT y Claude consumen contenido sin un compromiso significativo ni ingresos para las fuentes originales.
Cloudflare dice que continuará trabajando con desarrolladores para impulsar a los rastreadores de IA que deseen tener acceso permitido a revelar su identidad, propósito y comportamiento de rastreo.
“El contenido original es lo que hace de Internet uno de los mayores inventos del último siglo”, declaró el CEO Matthew Prince. “Tenemos que unirnos para protegerlo.”
No te limites a leer noticias sobre criptomonedas. Entiéndelas. Suscríbete a nuestro boletín. Es gratis.
Aviso de responsabilidad. La información proporcionada no es un consejo de trading. Cryptopolitan.com no asumimos responsabilidad alguna por las inversiones realizadas basándose en la información proporcionada en esta página. Recomendamos encarecidamente la investigación independiente y/o la consulta con un profesional calificado antes de tomar cualquier decisión de inversión.
Florence Muchai
Florence ha estado cubriendo durante los últimos 6 años noticias sobre criptomonedas, juegos, tecnología e inteligencia artificial. Sus estudios de Ciencias de la Computación en la Universidad de Ciencias y Tecnología de Meru y Gestión de Desastres y Diplomacia Internacional en MMUST la dotan adecuadamente de habilidades lingüísticas, de observación y técnicas. Florence ha trabajado en VAP Group y como editora en varias casas de medios de criptomonedas.
