Anthropic se presenta públicamente como la compañía de IA más ética del sector. Claude no es solo un chatbot: es la promesa de una inteligencia artificial responsable, transparente y alineada con los valores humanos.
Pero hay un número difícil de defender en esa narrativa: según datos de Cloudflare Radar, los bots de Anthropic rastrearon páginas web aproximadamente 2.800 veces por cada visita que devolvieron a los sitios en la primera semana de julio de 2026.
Para ponerlo en perspectiva: DuckDuckGo rastrea 1.5 páginas por cada visita que devuelve. Google, 5. Anthropic, 2.800.
Ese ratio no es un error temporal. En enero de 2025, la cifra era de 286.930 rastreos por cada visita devuelta. En junio de 2025, cayó a 70.900. En julio de 2025, a 38.065. La tendencia es descendente —una mejora del 96% en 18 meses—, pero incluso después de esa caída dramática, ClaudeBot sigue siendo aproximadamente 13 veces peor que GPTBot de OpenAI y más de 2.200 veces peor que el craweler de Google.
En los últimos meses, la compañía ha criticado públicamente a rivales por usar las salidas de Claude para entrenar sus propios modelos. A esa práctica la llama “distillation attacks” y dice que viola sus términos de servicio.
Pero Business Insider señaló la estructuralmente similar que es lo que Anthropic hace con el contenido de los sitios web: tomar material de terceros, muchas veces sin su consentimiento, para mejorar sus propios productos.
La diferencia es que Anthropic lo hace a escala industrial y con un craweler que no fue construido para devolver tráfico.
Tres bots, un solo problema
Anthropic no opera un solo craweler. Son tres. ClaudeBot recolecta contenido exclusivamente para entrenar modelos. Claude-User accede a páginas cuando un usuario real hace una pregunta. Claude-SearchBot rastrea para mejorar los resultados de búsqueda de Claude. El ratio de 2.800:1 pertenece solo a ClaudeBot —el bot de puro entrenamiento—. Los otros dos tienen una ruta mucho más directa de regreso al sitio original.
Esto importa porque revela la arquitectura real del negocio. Anthropic construyó la parte que extrae contenido años antes de tener cualquier mecanismo para devolver valor. El crawling vino primero; la búsqueda, mucho después.
Cloudflare se convierte en el sheriff de internet
La respuesta llegó el 1 de julio de 2026. Cloudflare reemplazó su botón de bloqueo con un sistema de tres categorías —Search, Agent, Training— que permite a cada sitio decidir qué tipo de craweler quiere aceptar.
Pero el movimiento más significativo es el Monetization Gateway: infraestructura que permite a los sitios web cobrar directamente a los agentes de IA por cada página que lean, usando el protocolo x402.
Es el primer uso real del HTTP 402 “Payment Required”, un código que llevaba 33 años dormido en la especificación web. Coinbase ya procesó 160 millones de transacciones autónomas con este protocolo en el último año.
El 15 de septiembre, Cloudflare activará defaults que bloquean bots de Training y Agent en páginas con anuncios. Googlebot —que mezcla funciones de búsqueda y entrenamiento en un solo craweler— será afectado. Es un ultimátum claro: separen sus bots o pierdan acceso.
Los números de Cloudflare confirman que el tráfico de bots ya supera al humano: el 57.5% de todas las peticiones web globales provienen de máquinas, y el 52% de esas peticiones sirven para entrenamiento de IA.
Para los creadores de contenido hispanohablantes, la ecuación es despiadada. Los medios grandes tienen equipo legal y presupuesto para negociar licencias directas. Los blogs, revistas digitales y creadores independientes de la región no. Y el contenido en español —con 500 millones de hablantes nativos— tiene un valor enorme para los modelos de lenguaje que necesitan diversidad lingüística.
A medida que la presión pública crece, un ratio más bajo significa menos sitios que bloqueen su craweler. Pero “mejorar” no es lo mismo que “ser justo”. Ir de terrible a malo es progreso real. No es lo mismo que ser parte de un intercambio equitativo con la web que te dio de comer.
La diferencia entre lo que Meta hace con tus fotos de Instagram y lo que Anthropic hace con el contenido de la web es una cuestión de escala, no de principio.
Fuentes consultadas:
- Cloudflare Blog: The crawl before the fall… of referrals
- Business Insider: Cloudflare’s latest AI rankings expose the web’s biggest free rider
- Soporte Anthropic: Does Anthropic crawl data from the web?
- TechTimes: Cloudflare Separates AI Crawlers by Purpose
- LinkedIn: ClaudeBot Visits Websites 11,000 Times for Every 1 Visitor
- Montevideo Portal: Anthropic rastrea la web 2.800 veces por cada visita
