A Cloudflare está bloqueando o ChatGPT e outros robôs de IA no meu site?
Pode estar. A Cloudflare mudou o padrão para bloquear robôs de IA em julho de 2025 e, desde 15 de setembro de 2026, domínios novos bloqueiam robôs de treino e de agente nas páginas com anúncios. Confira em Security Settings, Configure AI bot policies: libere Search e Agent para o ChatGPT, o Claude e o Perplexity lerem e citarem você, e bloqueie Training se preferir.
Fatos
- Em 1º de julho de 2025 a Cloudflare anunciou que mudaria o padrão para bloquear robôs de IA, a menos que paguem os criadores pelo conteúdo. (Cloudflare: Content Independence Day (Jul 2025))
- A documentação da Cloudflare diz que, a partir de 15 de setembro de 2026, domínios novos bloqueiam robôs classificados como Training ou Agent nas páginas com anúncios, e Search continua liberado. (Cloudflare docs: Block AI bots)
- A Cloudflare diz que robôs que fazem busca e treino ao mesmo tempo são bloqueados por toda configuração feita para bloquear treino de IA. (Cloudflare docs: Block AI bots)
- A OpenAI diz que sites que bloqueiam o OAI-SearchBot não aparecem nas respostas da busca do ChatGPT, enquanto bloquear o GPTBot só tira o site do treino. (OpenAI: Overview of OpenAI crawlers)
- A Anthropic tem três robôs: ClaudeBot para treino, Claude-User para pedidos de usuários e Claude-SearchBot para o índice de busca; bloquear os dois últimos pode reduzir sua visibilidade no Claude. (Anthropic: Does Anthropic crawl data from the web?)
Onde vejo o que a Cloudflare bloqueia?
No painel da Cloudflare, abra Security Settings e depois Configure AI bot policies. Cada categoria, Search, Agent e Training, tem três opções: Block, Block on pages with ads e Allow. A chave antiga Block AI bots está sendo descontinuada.
Quais robôs de IA devo liberar para ser citado?
Libere os robôs que respondem usuários e montam índices de busca; os de treino são outra decisão.
| Robô | Para quê | Categoria na Cloudflare | Para ser citado |
|---|---|---|---|
| OAI-SearchBot | Busca do ChatGPT | Search | Liberar |
| ChatGPT-User | Abre a página que o usuário pediu | Agent | Liberar |
| Claude-SearchBot | Índice de busca do Claude | Search | Liberar |
| Claude-User | Abre a página que o usuário do Claude pediu | Agent | Liberar |
| GPTBot, ClaudeBot | Treino de modelos | Training | Você decide |
O robots.txt ainda importa se uso Cloudflare?
Sim: as regras da Cloudflare decidem quem passa pela rede, e o robots.txt diz a cada robô o que ele pode ler. Os dois precisam concordar, senão vale o mais restritivo.
# Search and user-request crawlers: allowed User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: Claude-SearchBot Allow: / User-agent: Claude-User Allow: / User-agent: PerplexityBot Allow: / # Training crawlers: your choice User-agent: GPTBot Disallow: / User-agent: ClaudeBot Disallow: /
Por que bloquear o treino pode bloquear a busca?
Porque alguns robôs fazem as duas coisas. A Cloudflare avalia um robô misto de busca e treino pelas duas políticas, então bloquear Training em todas as páginas pode barrá-lo mesmo com Search liberado. Confira Search depois de mexer em Training.
Como confirmo que os robôs de IA voltaram a ler meu site?
Olhe as visitas deles depois da mudança, não só a configuração. O easyIndex registra cada leitura de robô de IA por página, então você vê quando o OAI-SearchBot ou o Claude-SearchBot voltam e percebe se as leituras param.
Passo a passo
- Abra as políticas de robôs de IA. Na Cloudflare vá em Security Settings, Configure AI bot policies, e anote a opção de cada categoria.
- Libere Search e Agent. Coloque Search e Agent em Allow para os índices de busca e os pedidos de usuários do ChatGPT, Claude e Perplexity passarem.
- Decida sobre Training. Bloqueie ou libere Training como preferir e confira de novo que Search segue liberado para os robôs mistos.
- Alinhe o robots.txt. Peça ao agente de código para liberar OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User e PerplexityBot no robots.txt.
- Acompanhe as leituras. Confirme que leituras desses robôs aparecem nos dias seguintes; a OpenAI diz que mudanças no robots.txt levam cerca de 24 horas.
Erros comuns
- Corrigir o robots.txt enquanto a Cloudflare continua barrando o robô na rede.
- Bloquear Training em todas as páginas sem ver o que acontece com os robôs mistos.
- Liberar o GPTBot e bloquear o OAI-SearchBot, o que deixa você fora da busca do ChatGPT.
- Confiar na configuração sem conferir se as leituras dos robôs voltaram.
Como o easyIndex resolve
O easyIndex registra quais robôs de IA leem cada página e mostra quando eles param, então um bloqueio na Cloudflare aparece; seu agente de código corrige o robots.txt via MCP e o easyIndex confere no ar. R$ 57 por site ao mês, com 7 dias grátis.
Perguntas frequentes
A Cloudflare bloqueia o Googlebot também?
O Googlebot rastreia para a busca e para outros usos, e a Cloudflare avalia robôs mistos também pela política de Training; confira essa opção se o tráfego do Google cair.
O padrão é o mesmo em domínios antigos e novos?
Não. Os padrões de 15 de setembro de 2026 valem para domínios novos; os antigos mantêm as opções já definidas, então confira o seu.
Preciso do pay per crawl da Cloudflare para ser citado?
Não. O pay per crawl é para quem quer cobrar dos robôs; para ser citado basta deixar entrar os robôs de busca e de agente.
Quanto tempo até o ChatGPT ver meu site depois de liberar?
A OpenAI diz que segue mudanças no robots.txt em cerca de 24 horas; ser citado depois disso depende das suas páginas.
Continue lendo
- Como o easyIndex funciona, do que eu preciso e quanto tempo até ver resultados?
- Quanto custa o easyIndex?
- Quais robôs de IA existem e como liberar no robots.txt?
- O ChatGPT e o Claude conseguem ler meu site em JavaScript?
- Como fazer o ChatGPT recomendar a minha empresa?
- Como medir os visitantes que chegam do ChatGPT e de outros assistentes de IA?
Verificado em .