Ir para o conteúdo
Prime Solutions Raio-X IA

Cloudflare bloqueando a IA: como conferir e liberar os robôs

Desde 15/09/2026, domínios novos na Cloudflare bloqueiam por padrão robôs de treino e agentes de IA nas páginas com anúncios. Veja como conferir o painel e liberar a IA.

Por Prime Solutions · Atualizado em · 5 min de leitura

Muitos sites passam pela Cloudflare, uma rede que acelera e protege o site contra ataques. Ela também decide quais robôs podem entrar. Se ela barra os robôs de IA, não adianta o robots.txt estar certo: eles param na porta, antes de ler qualquer coisa.

O que mudou em 15 de setembro de 2026

Segundo o anúncio oficial da Cloudflare, desde 15/09/2026 os domínios novos na Cloudflare começam com estas regras:

  • robôs de treino e agentes de IA ficam bloqueados nas páginas que mostram anúncios;
  • robôs de busca continuam liberados;
  • robôs que fazem busca e treino ao mesmo tempo podem ser barrados junto, porque vale a regra mais restritiva.

Na prática, um site novo pode estar fechado para parte dos robôs de IA sem que o dono tenha mexido em nada.

Outras configurações que barram robôs

  • Bloqueio de robôs de IA no AI Crawl Control: permite liberar ou bloquear cada robô.
  • Bot Fight Mode: desafia tráfego automatizado em geral e pode atingir robôs legítimos.
  • Regras de firewall (WAF) criadas por você ou por quem cuida do site, por país, por User-Agent ou por "nível de ameaça".
  • robots.txt gerenciado: a Cloudflare acrescenta regras de bloqueio de IA ao seu robots.txt.

Como conferir e liberar no painel

  1. Entre no painel da Cloudflare e abra o seu domínio.
  2. Vá em AI Crawl Control e abra a aba Crawlers. Ela lista os robôs de IA que visitaram o site e o que acontece com cada um.
  3. Na coluna Action, deixe liberados pelo menos os robôs de busca: OAI-SearchBot, Claude-SearchBot e PerplexityBot. Bloquear os de treino (GPTBot, ClaudeBot) é uma escolha sua.
  4. Em Security > Bots, veja se o Bot Fight Mode está ligado e se ele está desafiando robôs que você quer receber.
  5. Abra o seu /robots.txt no navegador e confira se a Cloudflare acrescentou bloqueios que você não quer.

Os nomes dos menus mudam de tempos em tempos. Se não encontrar, a documentação do AI Crawl Control tem o caminho atualizado.

Como o Raio-X IA testa isso

Abrimos a sua página inicial como um navegador comum e depois com a identificação de cada robô de IA, e comparamos as respostas. Se o navegador recebe a página e o robô recebe um bloqueio, um desafio ou uma página muito diferente, avisamos.

O resultado é indicativo: nossas requisições não saem dos endereços oficiais dos robôs, e alguns firewalls tratam o robô verdadeiro de outro jeito. Por isso, a confirmação final é sempre o painel da Cloudflare ou do seu firewall.

Não usa Cloudflare?

Outros serviços fazem o mesmo papel: Akamai, Fastly, Sucuri, Azure Front Door, AWS CloudFront com WAF e plugins de segurança do WordPress, como o Wordfence. Procure nas configurações por "bots", "AI crawlers" ou "bloqueio por User-Agent".