Atualizado em 29 de outubro de 2026
GPTBot, ClaudeBot e os demais: todo rastreador de IA explicado
12 nomes de user agent de 6 motores, para que serve cada um, e o que você perde de verdade ao mandá-lo embora. Esta é a mesma lista que o nosso motor de análise usa.
A lista
| User agent | Motor | O que ele faz | Se você bloquear |
|---|---|---|---|
| GPTBot | ChatGPT | Coleta páginas para treinar os modelos da OpenAI. | Mantém seu conteúdo fora do treinamento. Não tira você da busca do ChatGPT. |
| OAI-SearchBot | ChatGPT | Monta o índice por trás da busca do ChatGPT. | Tira você dos resultados de busca do ChatGPT. Normalmente é o que você não queria ter bloqueado. |
| ChatGPT-User | ChatGPT | Busca uma página ao vivo quando alguém pede ao ChatGPT para abrir um link. | Quem colar seu link não recebe nada de volta. |
| ClaudeBot | Claude | Coleta páginas para a Anthropic. | Mantém seu conteúdo fora dos dados de treinamento. |
| Claude-SearchBot | Claude | Lê a web para as buscas feitas dentro do Claude. | Suas páginas ficam de fora do que o Claude encontra quando pesquisa. |
| Claude-User | Claude | Busca uma página quando alguém pergunta ao Claude sobre ela. | O Claude não consegue abrir suas páginas quando pedem a ele. |
| Google-Extended | Google AI | Controla se suas páginas treinam o Gemini e aparecem nas respostas de IA. | Não afeta o posicionamento comum na Busca do Google. É uma chave à parte. |
| PerplexityBot | Perplexity | Indexa páginas para o Perplexity poder citá-las. | O Perplexity para de citar você, e ele cita bastante. |
| Perplexity-User | Perplexity | Busca uma página ao vivo para uma pergunta específica. | As consultas ao vivo ao seu site falham. |
| Applebot | Apple Intelligence | O rastreador de longa data da Apple, por trás da Siri e do Spotlight. | Você perde os resultados na Siri e no Spotlight, além dos recursos de IA. |
| Applebot-Extended | Apple Intelligence | Controla só o uso em treinamento, não a busca. | Mantém você fora do treinamento dos modelos da Apple e preserva os resultados na Siri. |
| CCBot | Common Crawl | Monta o conjunto de dados aberto com que muitos modelos são treinados. | Tira você de um conjunto de dados usado por muitas empresas, e não por uma só. |
Por motor, e quanto custa cada decisão
ChatGPT
- GPTBot. Coleta páginas para treinar os modelos da OpenAI. Mantém seu conteúdo fora do treinamento. Não tira você da busca do ChatGPT.
- OAI-SearchBot. Monta o índice por trás da busca do ChatGPT. Tira você dos resultados de busca do ChatGPT. Normalmente é o que você não queria ter bloqueado.
- ChatGPT-User. Busca uma página ao vivo quando alguém pede ao ChatGPT para abrir um link. Quem colar seu link não recebe nada de volta.
Claude
- ClaudeBot. Coleta páginas para a Anthropic. Mantém seu conteúdo fora dos dados de treinamento.
- Claude-SearchBot. Lê a web para as buscas feitas dentro do Claude. Suas páginas ficam de fora do que o Claude encontra quando pesquisa.
- Claude-User. Busca uma página quando alguém pergunta ao Claude sobre ela. O Claude não consegue abrir suas páginas quando pedem a ele.
Google AI
- Google-Extended. Controla se suas páginas treinam o Gemini e aparecem nas respostas de IA. Não afeta o posicionamento comum na Busca do Google. É uma chave à parte.
Perplexity
- PerplexityBot. Indexa páginas para o Perplexity poder citá-las. O Perplexity para de citar você, e ele cita bastante.
- Perplexity-User. Busca uma página ao vivo para uma pergunta específica. As consultas ao vivo ao seu site falham.
Apple Intelligence
- Applebot. O rastreador de longa data da Apple, por trás da Siri e do Spotlight. Você perde os resultados na Siri e no Spotlight, além dos recursos de IA.
- Applebot-Extended. Controla só o uso em treinamento, não a busca. Mantém você fora do treinamento dos modelos da Apple e preserva os resultados na Siri.
Common Crawl
- CCBot. Monta o conjunto de dados aberto com que muitos modelos são treinados. Tira você de um conjunto de dados usado por muitas empresas, e não por uma só.
A distinção que quase todo mundo erra
- OpenAI
- O GPTBot treina. O OAI-SearchBot busca. Agentes de treinamento e agentes de busca não são a mesma coisa. O GPTBot alimenta o treinamento dos modelos. O OAI-SearchBot alimenta a busca do ChatGPT. Bloquear o primeiro mantém o que você escreve fora do próximo modelo e deixa você encontrável; bloquear o segundo torna você invisível no produto que as pessoas de fato usam.
- O Google-Extended não é o Googlebot. O Google se divide do mesmo jeito. O Google-Extended comanda o Gemini e as respostas de IA. Ele não tem efeito nenhum sobre a Busca comum, que é do Googlebot. São chaves separadas e você pode ajustar cada uma de um jeito diferente.
Bloquear o treinamento e continuar encontrável
User-agent: GPTBot
Disallow: /
User-agent: Google-Extended
Disallow: /
User-agent: CCBot
Disallow: / Tudo o que não é nomeado continua liberado, então o OAI-SearchBot, o PerplexityBot e os agentes de consulta em tempo real ainda encontram você.
Por que o problema pode não estar nas suas regras
Três coisas bloqueiam rastreadores sem que o robots.txt tenha nada a ver com isso:
- Proteção contra bots que exige uma verificação (como um CAPTCHA) de tudo o que não reconhece, antes mesmo de o arquivo ser lido.
- Limite de requisições que trata um rastreador como se fosse um ataque.
- Conteúdo que precisa de JavaScript, que vários destes agentes não rodam. A página carrega e está vazia.
O verificador de rastreadores testa a primeira. A verificação completa testa todas.
Perguntas sobre rastreadores de IA
O que é o GPTBot?
O rastreador da OpenAI para coletar páginas da web e treinar os modelos dela. Ele obedece ao robots.txt. Não é o agente por trás da busca do ChatGPT, que é o OAI-SearchBot, e confundir os dois é o erro mais comum neste assunto.
Qual é a regra de robots.txt para o GPTBot?
Para bloquear: User-agent: GPTBot e depois Disallow: /. Para liberar, não escreva regra nenhuma para ele, porque o arquivo funciona por exceção.
Bloquear o GPTBot prejudica o meu SEO?
Não. O Googlebot é um agente separado e o posicionamento na busca comum não é afetado. O que você perde é o seu conteúdo ser usado no treinamento dos modelos.
Qual rastreador eu nunca devo bloquear?
Se você quer ser encontrado nas respostas de IA: o OAI-SearchBot e o PerplexityBot. São eles que montam hoje os índices de onde saem as respostas.
Com que frequência esta lista muda?
Os motores acrescentam e renomeiam agentes algumas vezes por ano. Esta lista é a que o nosso motor de análise usa, então ela é atualizada sempre que o motor é. Revisada pela última vez em 29 de outubro de 2026.
Confira o seu próprio robots.txt.
As suas regras comparadas com os 12 nomes, com uma resposta direta para cada um.