Cloudflare Bloqueará por Defecto los Bots de IA en los Sitios Web

La empresa de infraestructura de internet Cloudflare ha anunciado que, a partir de ahora, bloqueará por defecto los bots de inteligencia artificial (IA) que intenten rastrear los sitios web de sus clientes. Además, Cloudflare ofrecerá a los clientes la posibilidad de permitir o bloquear manualmente estos bots según cada caso, y lanzará un servicio denominado 'pay-per-crawl' que permitirá a los clientes recibir compensación cada vez que un bot de IA quiera recopilar contenido de su sitio web.

Estos bots son un tipo de 'crawler' web, un algoritmo que recorre internet para procesar y catalogar la información de cada sitio web. En el pasado, los crawlers se asociaban principalmente con la recopilación de datos para motores de búsqueda, pero ahora los desarrolladores los utilizan para reunir datos necesarios para construir y utilizar sistemas de IA.