ChatGPT, Claude e Perplexity conseguem ler seu site?

Revisamos seu robots.txt, llms.txt, sitemap e a página indicada. Não guardamos a URL.

Como funciona o verificador

Você digita o endereço do seu site e o verificador baixa, a partir do nosso servidor, quatro arquivos públicos: a página indicada, seu robots.txt, seu llms.txt e seu sitemap. Ele não executa JavaScript, assim como a maioria dos rastreadores de IA, então você vê o site como eles veem.

No robots.txt, aplicamos as mesmas regras que os bots seguem (o padrão RFC 9309): cada bot obedece só ao grupo que o nomeia e, se nenhum o nomeia, ao grupo geral «*». Por isso um bot pode estar bloqueado mesmo que a sua regra geral o libere, ou o contrário. A tabela mostra, bot por bot, se ele pode entrar e qual linha do arquivo decide isso.

Nem todos os bots de IA fazem a mesma coisa. Os de busca (OAI-SearchBot, Claude-SearchBot e PerplexityBot) decidem se você aparece nas respostas: bloqueá-los deixa você de fora. Os de treinamento (GPTBot, ClaudeBot, Google-Extended e CCBot) coletam conteúdo para treinar modelos: bloqueá-los é uma decisão legítima e não tira você das respostas de busca. Os que agem quando um usuário pede (ChatGPT-User, Claude-User e Perplexity-User) visitam uma página específica; a OpenAI e a Perplexity avisam que os delas podem não seguir o robots.txt.

Além do robots.txt, revisamos o que também pode deixar você de fora: uma tag noindex na página ou no cabeçalho X-Robots-Tag, pouco texto no HTML sem JavaScript (comum em sites feitos só com React, Vue ou construtores visuais mal configurados), o título, a descrição, o canonical, os dados estruturados JSON-LD e o sitemap.

O llms.txt aparece como informativo: é uma proposta para descrever o seu site aos modelos de linguagem, mas nenhum grande buscador confirmou que o usa. Ter o arquivo não faz você aparecer, e não ter não prejudica.

Se um site bloqueia o nosso servidor (um firewall, um anti-bot ou a Cloudflare respondendo com erro 403), o resultado aparece como «não foi possível verificar», e não como falha do seu site: não temos como saber o que um bot real vê. Não guardamos a URL analisada nem a enviamos para a análise de dados; o resultado fica algumas horas em cache para não baixar o mesmo site de novo.

O plano completo para a IA recomendar você: Como fazer o ChatGPT e o Perplexity recomendarem sua marca

Perguntas frequentes

Bloquear o GPTBot me tira do ChatGPT?

Não. Segundo a OpenAI, cada bot é controlado separadamente: o GPTBot coleta conteúdo para treinar modelos e o OAI-SearchBot decide se você aparece nas respostas de busca do ChatGPT. Você pode bloquear o GPTBot e continuar aparecendo se liberar o OAI-SearchBot.

O que significa «decisão sua» num bot bloqueado?

Que esse bot é de treinamento. Bloqueá-lo evita que o seu conteúdo seja usado para treinar modelos e não impede que você seja citado nas respostas de busca, por isso não contamos como erro: é uma escolha legítima.

Por que aparece «não foi possível verificar»?

Porque o seu servidor ou a sua CDN respondeu ao verificador com um erro (por exemplo 403), demorou mais de 5 segundos ou não respondeu. Pode ser que um bot real consiga entrar, ou que também seja bloqueado: revise a configuração de bots da sua hospedagem ou da Cloudflare.

Preciso de um llms.txt?

Não é essencial. É uma proposta para orientar os modelos de linguagem, mas nenhum grande buscador confirmou que o usa. Priorize que os bots de busca possam entrar e que o seu conteúdo seja lido sem JavaScript.

Se tudo der certo, o ChatGPT vai me recomendar?

Não necessariamente. A IA conseguir ler o seu site é o requisito; ela citar você depende do seu conteúdo, do que outros sites dizem sobre você e da sua autoridade no assunto. Esta ferramenta mede a primeira parte, não a segunda.

Vocês guardam a URL que eu analiso?

Não guardamos em nenhum banco de dados nem enviamos para a análise de dados. O resultado fica algumas horas no cache do servidor para que, se outra pessoa analisar o mesmo site, não precisemos baixá-lo de novo.

Programa de formação

Pronto para transformar sua ideia em um projeto real?

Transforma é o programa onde você aprenderá a criar, executar e escalar seu projeto com clareza e método.

Conhecer o Programa Transforma