# Verificar robots.txt para bots de IA: você está bloqueando o GPTBot ou o ChatGPT?

> Analise seu robots.txt contra 11 bots de IA (GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot…). Veja quais bots você bloqueia, a linha exata que causa isso e o patch pronto para copiar.

- **Fonte (source):** https://aistohire.com/pt/aeopro-auditoria-aeo-visibilidade-ia-198/f/auditoria-robots-txt-bots-ia
- **Plataforma (platform):** AIstoHire
- **Idioma (language):** pt

## Em resumo

- Verifique se o seu robots.txt está bloqueando bots de IA
- Cole uma URL e o Aeopro cruza seu robots.txt com os 11 bots do ChatGPT, Claude, Perplexity e Bing, e te mostra a linha exata que os impede de acessar.
- Separe bloquear de ser invisível
- Prioridade real na busca de texto
- A linha exata que te bloqueia

## Verifique se o seu robots.txt está bloqueando bots de IA

O Aeopro baixa seu /robots.txt, analisa por grupos de User-agent e avalia, bot a bot, se a URL que você está auditando está permitida ou bloqueada. Não procura seu nome de bot «a olho» no arquivo: aplica as regras de verdade: o grupo específico ganha sobre o curinga *, e dentro do grupo prevalece a regra com o padrão mais longo, com o Allow desempata frente ao Disallow. Suporta os curingas * e $ nas rotas, então um Disallow: /*?* ou um Allow: /blog/$ são interpretados como o crawler interpreta, não como parecem à primeira vista.

O resultado é uma matriz de 11 bots com sua classe ao lado: OAI-SearchBot, ChatGPT-User, Claude-User, Claude-SearchBot, PerplexityBot e Bingbot são bots de resposta —os que buscam, citam e linkam—; GPTBot, ClaudeBot, Google-Extended, Applebot-Extended e CCBot são de treinamento. Essa distinção é a chave de todo o relatório: se você bloqueia um bot de resposta, a descoberta entra como bloqueante e limita sua pontuação AEO, porque sem acesso não há citação possível. Se você bloqueia um de treinamento, a descoberta é informativa: não querer que seu conteúdo entre em um dataset é uma decisão legítima e o Aeopro não discute isso.

Cada bot bloqueado vem com a prova: o semáforo vermelho, o grupo de User-agent que se aplica e a linha exata do arquivo que o provoca, copiada exatamente como está. Você não precisa reler seu robots.txt procurando o culpado, ele está na sua frente.

O Aeopro também cobre falhas que não são um Disallow. Se o seu /robots.txt retorna uma página HTML —típico de um 404 formatado ou de um roteador SPA que mantém tudo— ou responde com um erro 500, ele detecta e levanta como descoberta: os bots tratam isso como «sem restrições», mas é sinal de descuido. E se houver um Crawl-delay acima de 10 segundos, ele avisa, porque a esse ritmo alguns crawlers desistem de ler você por completo. Se você não tiver um robots.txt, o relatório informa isso sem penalizá-lo: a ausência não bloqueia ninguém.

## O que inclui

- **Separe bloquear de ser invisível** — bloquear um bot de treinamento é uma decisão sua e aparece como informativa. Bloquear um bot de resposta é desaparecer das respostas do ChatGPT ou Perplexity, e isso sim é uma descoberta bloqueante que limita sua pontuação AEO.
- **Prioridade real na busca de texto** — grupo específico acima do comodim *, padrão mais longo acima do curto e Allow vencendo o desempate, com suporte de * e $ nas rotas. É a mesma lógica que aplica o crawler, então o veredicto é o que você realmente terá.
- **A linha exata que te bloqueia** — cada bot em vermelho vem com o grupo de User-agent que se aplica e o texto literal da linha causadora. Chega de ler 200 linhas de robots.txt manualmente para encontrar o Disallow que sobra.
- **Os 11 bots que importam agora, com sua classe** — os seis de resposta (OAI-SearchBot, ChatGPT-User, Claude-User, Claude-SearchBot, PerplexityBot, Bingbot) e os cinco de treinamento (GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot), avaliados contra a URL específica que você audita, não apenas contra a raiz do domínio.
- **Capture falhas silenciosas** — um /robots.txt que serve HTML em vez de texto puro, um que responde 500 ou um Crawl-delay absurdo acima de 10 segundos. Falhas que não aparecem em nenhuma ferramenta de SEO clássica e que revelam um servidor mal configurado.
- **A correção já escrita, e sem gastar IA** — a partir da própria descoberta você gera o patch de robots.txt com um interruptor por bot. Você escolhe quem abrir, o arquivo final é regenerado ao vivo com seu robots.txt atual mais o novo bloco, e você copia. É determinista: não consome tokens.
- **Grátis para repetir** — a auditoria de robots.txt faz parte das verificações determinísticas do relatório. Você altera o arquivo, o publica, reanalisa e o delta te diz se a descoberta foi resolvida. Quantas vezes você quiser.

## Perguntas frequentes

### Como posso saber se meu robots.txt está bloqueando o ChatGPT?

Pegue a URL no Aeopro: baixe seu /robots.txt, analise por grupos de User-agent e avalie essa URL específica contra os 11 bots de IA. No cartão «Acesso dos bots de IA» você terá cada um com um semáforo verde ou vermelho. Para o ChatGPT, existem dois bots distintos e é importante não confundi-los: OAI-SearchBot e ChatGPT-User são os de resposta, que buscam e citam fontes em uma conversa; GPTBot é o de treinamento. Se o que você deseja é ser citado, os que não pode bloquear são os dois primeiros.

### Qual é a diferença entre um bot de resposta e um bot de treinamento?

Um bot de treinamento (GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot) coleta conteúdo para treinar modelos. Bloqueá-lo é uma decisão legítima e o Aeopro o marca como informativo, sem penalizar sua pontuação. Um bot de resposta (OAI-SearchBot, ChatGPT-User, Claude-User, Claude-SearchBot, PerplexityBot, Bingbot) é aquele que lê sua página no momento em que alguém pergunta algo, e é ele quem cita e vincula você na resposta. Bloqueá-lo equivale a não existir para essa IA: por isso essa descoberta é considerada bloqueante e limita a pontuação AEO do relatório.

### Por que meu robots.txt parece permissivo e a ferramenta diz que bloqueia bots?

Quase sempre é um problema de precedência. Se você tem um grupo específico para um bot, esse grupo substitui completamente o do curinga *: as regras permissivas do * deixam de se aplicar. E dentro de um grupo, não ganha a primeira regra nem a última, ganha a de padrão mais longo, com o Allow desempantando frente ao Disallow em caso de empate. Adicione os curingas * e $ e é fácil que um Disallow pensado para os parâmetros de busca acabe bloqueando metade do site. Aeopro aplica essas regras da mesma forma que o crawler e te mostra a linha exata que decide o veredicto, assim você vê de onde vem o bloqueio.

### O que acontece se eu não tiver um robots.txt, ou se ele retornar um erro?

Não ter um robots.txt não bloqueia ninguém e a Aeopro não te penaliza por isso: ela indica e segue. O que realmente gera um achado é se o arquivo estiver quebrado: se o seu /robots.txt retornar uma página HTML em vez de texto plano —muito comum em sites de uma única página, onde o roteador fica com todos os caminhos— ou se responder com um erro 500. Os bots interpretam isso como "sem restrições", então não te fecha a porta, mas é sintoma de um servidor mal configurado. Também te avisa de um Crawl-delay acima de 10 segundos, porque nesse ritmo alguns crawlers desistem antes de ler seu site completo.

### Aeopro me dá o robots.txt corrigido ou apenas o diagnóstico?

Ela te dá corrigido. Desde o achado, você abre o patch do robots.txt, que traz um interruptor para cada bot bloqueado: você decide a quem abre e a quem deixa de fora, e o arquivo completo é regenerado ao vivo juntando seu robots.txt atual com o novo bloco de permissões, aproveitando que o grupo específico ganha sobre o curinga. Você copia e faz o upload. Este patch é composto sem IA: é determinista e não consome tokens, assim como a própria auditoria, então você pode reanalisar depois para confirmar que o achado foi fechado.

- [Aeopro — Auditoria AEO: faça com que a IA possa ler e citar você](https://aistohire.com/pt/aeopro-auditoria-aeo-visibilidade-ia-198)

## Sobre a plataforma

**Aeopro — Auditoria AEO: faça com que a IA possa ler e citar você** — uma aplicação de AIstoHire. Disponível em: https://aistohire.com/pt/aeopro-auditoria-aeo-visibilidade-ia-198/f/auditoria-robots-txt-bots-ia

### Outros idiomas

- `es`: https://aistohire.com/es/aeopro-auditoria-aeo-visibilidad-en-ia-198/f/auditoria-robots-txt-bots-ia
- `en`: https://aistohire.com/aeopro-aeo-audit-ai-visibility-198/f/robots-txt-audit-ai-bots
- `fr`: https://aistohire.com/fr/aeopro-audit-aeo-visibilite-ia-198/f/audit-robots-txt-bots-ia
- `it`: https://aistohire.com/it/aeopro-audit-aeo-visibilita-ia-198/f/audit-robots-txt-bot-ia
- `de`: https://aistohire.com/de/aeopro-aeo-audit-ki-sichtbarkeit-198/f/robots-txt-audit-ki-bots
- `bg`: https://aistohire.com/bg/aeopro-proverete-dali-chatgpt-i-perplexity-mogat-da-tsitirat-sayta-vi-198/f/odit-na-robots-txt-za-ai-botove
- `ja`: https://aistohire.com/ja/aeo-kansa-ai-inyo-taisaku-198/f/robots-txt-ai-bot-kansa
- `nl`: https://aistohire.com/nl/aeopro-controleer-of-chatgpt-en-perplexity-je-site-kunnen-citeren-198/f/robots-txt-audit-ai-bots
- `ko`: https://aistohire.com/ko/aeopro-aeo-audit-ai-inyong-198/f/robots-txt-ai-bot-jeomgeom
- `sv`: https://aistohire.com/sv/aeopro-granska-om-chatgpt-och-perplexity-kan-citera-din-webbplats-198/f/granskning-robots-txt-ai-botar
- `da`: https://aistohire.com/da/aeopro-tjek-om-chatgpt-og-perplexity-kan-citere-dit-websted-198/f/audit-af-robots-txt-for-ai-bots
- `ar`: https://aistohire.com/ar/aeopro-dqq-hl-ysttia-chatgpt-wperplexity-alastshhad-bmuqak-198/f/tadqiq-robots-txt-botat-althaka2-alistinaa3i
- `no`: https://aistohire.com/no/aeopro-sjekk-om-chatgpt-og-perplexity-kan-sitere-nettstedet-ditt-198/f/revisjon-robots-txt-ki-roboter
- `fi`: https://aistohire.com/fi/aeopro-auditoi-voivatko-chatgpt-ja-perplexity-lainata-sivustoasi-198/f/robots-txt-tekoalybotit-auditointi
- `zh`: https://aistohire.com/zh/aeopro-aeo-geo-audit-198/f/robots-txt-ai-bots-audit
- `pl`: https://aistohire.com/pl/aeopro-sprawdz-czy-chatgpt-i-perplexity-zacytuja-twoja-strone-198/f/audyt-robots-txt-boty-ai
- `he`: https://aistohire.com/he/aeopro-bdko-am-chatgpt-v-perplexity-ykolim-ltstt-at-hatr-shlkm-198/f/bdikat-robots-txt-botim-bina-melachutit
- `cs`: https://aistohire.com/cs/aeopro-zjisti-zda-chatgpt-a-perplexity-mohou-citovat-tvuj-web-198/f/audit-robots-txt-ai-boti
- `id`: https://aistohire.com/id/aeopro-audit-apakah-chatgpt-dan-perplexity-bisa-kutip-situs-anda-198/f/audit-robots-txt-bot-ai
