Quién paga
Indie hackers y fundadores de SaaS pequeños en plataformas de pago por uso (GCP, Vercel, AWS): de 29 a 99 $/mes, justificado por una sola factura de 10.000 $ evitada.
Lo que dijo la gente
Un fundador recibió una factura de GCP de 10.000 $ en un mes por el scraping de ClaudeBot, posiblemente de clonadores que copiaban el software.
Leer el comentario ↗Conocidos vieron cómo sus facturas de Vercel se dispararon por scraping de bots justo después de promocionarse en HN/Twitter, incluso con la protección de bots de Cloudflare activada.
Leer el comentario ↗Un operador tiene que bloquear ASNs de proveedores cloud completos en todas sus propiedades por un scraping abusivo constante, lo que perjudica a usuarios reales de VPN.
Leer el comentario ↗
Parafraseado del debate. Sigue los enlaces para ver los comentarios originales.
Por qué ahora
Los rastreadores de IA y los scrapers agénticos han explotado en los últimos 12 meses (ClaudeBot, GPTBot, agentes sigilosos), y el precio por uso (Vercel, serverless) convierte el tráfico directamente en pérdida de dinero.
Lo que ya existe
El hueco
Las herramientas de bots existentes son WAFs en el edge; las alertas de gasto cloud existentes solo notifican. Nadie vincula la clasificación de bots por petición con una mitigación que escale automáticamente (rate-limit, desafío, bloqueo de ASN, caché) para limitar específicamente el gasto medido en despliegues pequeños de pago por uso.
Foso
Un dataset creciente de huellas de scrapers y de comportamiento entre clientes; bloqueo por flujo de trabajo a medida que se acumulan reglas de mitigación por sitio.
En contra
Qué la haría fracasar
Cloudflare lanza de un día para otro un nivel gratuito de bloqueo de bots con conciencia de gasto y comoditiza el valor principal.
La objeción más fuerte del equipo rojo
Dolor real y actual (facturas sorpresa de 10.000 $ por rastreadores de IA) y ningún producto vincula la clasificación de bots con un límite de gasto automático en plataformas de pago por uso para el segmento por debajo de empresa.
Constrúyela en 3 pasos
- Lanzar un agente/middleware para Vercel + Cloudflare Workers + NGINX que registre huellas de peticiones y el coste de egress por ruta.
- Añadir heurísticas de detección (sin peticiones de CSS/JS/favicon, patrones de ASN, user agents conocidos de rastreadores de IA) con escalado automático de rate-limit/bloqueo.
- Conectarlo con las APIs de facturación cloud para activar límites duros o alertas cuando el gasto proyectado por scrapers supere un umbral.
Debate original
I posted to HN, and then my website was flooded with AI bot traffic ↗
345 puntos · 185 comentarios · De los comentarios · Artículo enlazado
Traducido del inglés. Leer el original