Quem paga
Indie hackers e fundadores de SaaS pequenos em plataformas de cobrança por uso (GCP, Vercel, AWS), a US$29–99/mês, justificado por uma única conta de US$10 mil evitada.
$29–99
O que as pessoas disseram
Um fundador recebeu uma conta de US$10 mil no GCP em um único mês por causa de scraping do ClaudeBot, possivelmente de clonadores copiando o software.
Ler o comentário ↗Conhecidos tiveram contas da Vercel explodindo por scraping de bots logo após divulgarem no HN/Twitter, mesmo com a proteção de bots da Cloudflare ativa.
Ler o comentário ↗O operador precisa bloquear ASNs inteiros de provedores de nuvem em todas as propriedades por causa de scraping abusivo incessante, prejudicando usuários reais de VPN.
Ler o comentário ↗
Parafraseado da discussão. Siga os links para ler os comentários originais.
Por que agora
Crawlers de IA e agentes de scraping explodiram nos últimos 12 meses (ClaudeBot, GPTBot, agentes furtivos), e a cobrança por uso (Vercel, serverless) transforma tráfego diretamente em prejuízo financeiro.
O que já existe
A lacuna
As ferramentas de bot existentes são WAFs na borda; os alertas de gasto em nuvem apenas notificam. Nada conecta a classificação de bots por requisição a uma mitigação com escalonamento automático (rate-limit, desafio, bloqueio de ASN, cache) focada em limitar o gasto medido em implantações pequenas com cobrança por uso.
Fosso
Base crescente de fingerprints de scrapers e comportamento coletada entre clientes; lock-in de fluxo de trabalho conforme as regras de mitigação se acumulam em cada site.
Contra
O que a faria fracassar
A Cloudflare lança um tier gratuito de 'bloqueio de bots com consciência de gasto' e torna o valor central uma commodity da noite para o dia.
A objeção mais forte do red team
A dor é real, atual e custa dinheiro (contas-surpresa de US$10 mil causadas por crawlers de IA), e nenhum produto liga a classificação de bots à mitigação automática de limite de gasto em plataformas de cobrança por uso, na faixa abaixo de empresas grandes.
Construa em 3 passos
- Lançar um agente/middleware para Vercel + Cloudflare Workers + NGINX que registre fingerprints de requisições e o custo de egress por rota.
- Adicionar heurísticas de detecção (ausência de requisições de CSS/JS/favicon, padrões de ASN, User-Agents conhecidos de crawlers de IA) com escalonamento automático de rate-limit/bloqueio.
- Integrar às APIs de faturamento da nuvem para acionar limites rígidos e alertas quando o gasto projetado com scrapers ultrapassar um limite.
Discussão original
I posted to HN, and then my website was flooded with AI bot traffic ↗
345 pontos · 185 comentários · Dos comentários · Artigo vinculado
Traduzido do inglês. Ler o original