Cloudflare ha revelado la beta privada de AI Index, un avanzado índice web que pretende revolucionar cómo se accede al contenido online en el contexto de la inteligencia artificial. Este sistema permite que los dominios hagan su contenido visible para la IA bajo un control total del editor, mientras ofrece a los desarrolladores de IA un acceso estructurado y en tiempo real que incluye una compensación justa por su uso.
Con este nuevo enfoque, los sitios tendrán la capacidad de decidir quién y cómo accede a su contenido, estableciendo reglas claras para la monetización. Por otro lado, los desarrolladores de IA podrán suscribirse a actualizaciones directas del contenido, eliminando la necesidad de costosos y a menudo ineficientes rastreos ciegos.
Al activar AI Index, Cloudflare genera de manera automática un índice optimizado para cada dominio, proporcionando APIs estándar como MCP server, LLMs.txt y Search API, entre otras. Los editores podrán definir permisos y políticas de acceso, además de tener la posibilidad de monetizar dicho acceso a través de Pay per crawl y otras integraciones.
En un cambio de paradigma hacia lo que se ha denominado la «web suscrita», Cloudflare busca transformar el modelo de rastreo indiscriminado por un sistema de suscripción permissionado. Esto permitirá a los sitios exponer índices estructurados y publicar eventos de actualización, mientras que los desarrolladores de IA podrán descubrir dominios con índices activos, analizar metadatos antes de acceder al contenido, y suscribirse a cambios para obtener datos en tiempo real.
La iniciativa también incluye la creación de un Open Index, que permitirá búsquedas unificadas a través de múltiples sitios, manteniendo el control individual y brindando una monetización justa para los participantes. Esto significa que los constructores de IA tendrán la opción de acceder a datos frescos y estructurados, optimizando costes y tiempos, y mejorando la calidad y relevancia de la información.
Los beneficios del AI Index se extienden a varios actores clave: los editores de contenido tendrán un control total sobre la exposición de su material y nuevas oportunidades de ingresos; los desarrolladores de IA obtendrán acceso a datos de alta calidad de manera eficiente y con permisos explícitos; y se fomentará un ecosistema en línea más saludable y compensado.
Los interesados en formar parte de la beta privada de AI Index ya pueden inscribirse para participar. Esta innovación forma parte de la estrategia más amplia de Cloudflare para ofrecer una plataforma de conectividad que protege redes, acelera aplicaciones y facilita la adopción de modelos de seguridad Zero Trust. Con AI Index, Cloudflare se posiciona para liderar en la creación de un ecosistema digital más justo y organizado entre creadores, modelos y agentes de IA.
Más información y referencias en Noticias Cloud.
