Testador e Validador de Robots.txt Grátis
Teste e valide qualquer ficheiro robots.txt em tempo real. Verifique se o Googlebot, Bingbot e bots de IA como GPTBot ou Claude conseguem rastrear os seus URLs, detete erros de sintaxe e edite diretamente no navegador.
Teste e valide o seu robots.txt
Analise o robots.txt online do seu site ou cole diretivas para testar os acessos antes da publicação.
Confiança em todo o mundo
Escolhida por milhares de profissionais de SEO
De consultores a solo a agências globais, as equipas escolhem a TrueRanker para unificar SEO e visibilidade em IA.
Como testar e validar o seu robots.txt em três passos
Obtenha o ficheiro online a partir de um domínio ou cole o seu rascunho para validar regras antes da publicação.
Introduza o seu domínio ou cole regras
Escreva o URL do seu site para analisar o robots.txt online, ou use o modo texto para testar novas diretivas antes de as enviar para produção.
Teste caminhos de URL e User-Agents específicos
Selecione um crawler como Googlebot, Bingbot, GPTBot ou ClaudeBot, insira o caminho e verifique de imediato se o acesso é Permitido ou Bloqueado pela RFC 9309.
Audite a sintaxe e edite em direto
Inspecione erros de sintaxe, diretivas obsoletas e sitemaps declarados. Modifique o ficheiro no editor online e descarregue a versão corrigida.
O que o testador avalia no seu robots.txt
Seis verificações fundamentais executadas instantaneamente de acordo com a norma RFC 9309 e padrões de motores de busca.
Validação de sintaxe RFC 9309
Identifica dois pontos em falta, regras órfãs sem User-agent prévio, diretivas desconhecidas e formatos de linha inválidos.
Precedência pelo padrão mais longo
Aplica a secção 2.2.2 da RFC 9309: o padrão correspondente mais longo prevalece; se os comprimentos forem idênticos, Allow vence Disallow.
Carateres universais e âncoras de fim
Avalia rigorosamente * (qualquer sequência de carateres) e $ (fim do caminho de URL) face a parâmetros de consulta.
Matriz motores de busca vs. bots de IA
Audita em simultâneo permissões de acesso para motores tradicionais (Googlebot, Bingbot) e scrapers de IA generativa (GPTBot, ClaudeBot, PerplexityBot).
Declarações de XML Sitemaps
Deteta e valida todas as linhas Sitemap: para garantir que os motores de busca encontram a lista de URLs canónicos.
Alertas de bloqueio total e limite de tamanho
Avisa se uma regra Disallow: / bloquear acidentalmente o site inteiro ou se o ficheiro ultrapassar o limite Google de 512 KiB.
O robots.txt controla o rastreio, não a indexação
Um equívoco comum em SEO técnico é assumir que um Disallow no robots.txt remove uma página do índice da Google. Não remove: impede apenas que os motores descarreguem o conteúdo da página.
Se uma página bloqueada tiver ligações internas ou externas, a Google pode indexar o URL, título e texto âncora sem rastrear o seu corpo. Para impedir a indexação, a página tem de estar acessível para que o Googlebot possa ler uma meta tag robots noindex ou um cabeçalho HTTP X-Robots-Tag.
Desde setembro de 2019 que a Google não suporta formalmente a diretiva noindex no robots.txt. Este testador sinaliza diretivas obsoletas para que o seu ficheiro siga as melhores práticas.
- O robots.txt gere o orçamento de rastreio e recursos do servidor
- Bloquear um URL não garante a sua exclusão dos resultados da Google
- Utilize meta robots noindex em páginas rastreáveis para evitar indexação
- As declarações de sitemap ajudam os motores a mapear URLs prioritários
Erros frequentes em robots.txt
- Usar Disallow para tentar desindexar páginas
- Escrever noindex no robots.txt (ignorado pela Google)
- Bloquear ficheiros CSS, JS ou imagens necessários à renderização
- Bloquear o Googlebot ao tentar barrar apenas scrapers de IA
Além do robots.txt: monitorização diária de posições e auditoria técnica
Validar o robots.txt garante que os motores acedem às suas páginas. Mas para saber o desempenho dessas páginas na Google e respostas de IA, é essencial um acompanhamento contínuo.
O TrueRanker monitoriza diariamente as suas palavras-chave em desktop e mobile, audita erros técnicos on-page, controla backlinks e mede a visibilidade da marca no ChatGPT, Claude e Gemini.
- Rank tracking diário geolocalizado ao nível da cidade e código postal
- Auditorias SEO automáticas para links quebrados e falhas de rastreio
- Acompanhamento de visibilidade em IA para menções e citações em LLMs
- Alertas imediatos em caso de queda de posições ou bloqueio de URLs
O que o TrueRanker monitoriza
- Posições diárias na Google com deteção de funcionalidades SERP
- Menções e citações da marca no ChatGPT, Claude e Gemini
- Ganhos e perdas de backlinks e saúde dos domínios de referência
- Erros técnicos SEO on-page em todos os seus URLs
O que dizem os profissionais e agências de SEO que usam o TrueRanker
“Com o TrueRanker gerencio o SEO dos meus projetos. É uma ferramenta essencial para monitorizar todos os dias o efeito das nossas alterações On-Page e das estratégias de link building. ✌🏼”
“Não sei como vivia sem o TrueRanker. Tornou-se o meu rank tracker SEO diário para todos os projetos e extensões Chrome, algo que nenhuma outra ferramenta consegue. Recomendo vivamente!”
“O TrueRanker é uma ferramenta de topo que uso com clientes e nos meus próprios projetos porque o que não se mede não se melhora.”
“A melhor ferramenta para tracking, suporte muito amigável e aberto a mudanças e melhorias. Daqui consegue gerar resultados… e o que disse é mesmo verdade.”
“Uso o TrueRanker desde 2022 para tracking de keywords, e hoje é uma das minhas principais ferramentas SEO. Gere com precisão rankings, concorrentes, auditorias SEO e visibilidade em IA, substituindo alternativas mais caras. Além disso, o suporte é excelente. Recomendo!”
“Comparamos regularmente ferramentas de keyword tracking e, há mais de três anos, o TrueRanker é a primeira escolha da nossa agência SEO. A interface intuitiva, os planos escaláveis e o suporte reativo dão-nos tudo o que precisamos para monitorizar com precisão os rankings dos clientes.”
“Uso o TrueRanker desde agosto no meu próprio blog. O que mais valorizo é que me diz todos os dias o que aconteceu com o que já publiquei, e a pontuação GEO das auditorias mostrou-me que nenhum resumo de IA do Google me estava a citar. Na minha própria língua, com suporte próximo e uma prova sem cartão para o verificar antes de pagar.”
Perguntas frequentes sobre o teste de robots.txt
Tudo o que precisa de saber sobre diretivas de robots.txt, rastreio da Google, bots de IA e resolução de erros.
O que é um ficheiro robots.txt e qual a sua utilidade?
O robots.txt é um ficheiro de texto simples alojado na raiz do seu domínio (ex.: meusite.com/robots.txt) segundo o Robots Exclusion Protocol (RFC 9309). Informa os crawlers sobre que caminhos podem ou não solicitar, poupando largura de banda e capacidade do servidor.
Como testo se um URL está bloqueado pelo robots.txt?
Insira o seu domínio no testador, selecione o crawler (como Googlebot ou Bingbot) e introduza o caminho (ex.: /blog/artigo ou /admin/). A ferramenta aplica as regras segundo a RFC 9309 e indica de imediato se o acesso está Permitido ou Bloqueado, com a linha correspondente.
Como submeto um robots.txt atualizado à Google?
A Google atualiza e rastreia o seu robots.txt várias vezes ao dia. Para uma atualização imediata, aceda ao Google Search Console > Definições > robots.txt e solicite um novo rastreio.
O que acontece quando uma regra Allow e uma Disallow coincidem no mesmo URL?
Segundo a norma RFC 9309, vence a diretiva com o padrão de carateres mais longo. Se ambas tiverem exatamente o mesmo comprimento, a diretiva Allow tem prioridade sobre Disallow.
Como bloqueio crawlers de IA sem bloquear a Google?
Pode definir blocos de User-agent dedicados para bots de IA, como "User-agent: GPTBot", "User-agent: ClaudeBot" ou "User-agent: CCBot" com "Disallow: /". O Googlebot continuará a aceder ao site normalmente através do seu próprio bloco ou do bloco geral User-agent: *.
Posso usar "Noindex" no robots.txt para remover páginas da Google?
Não. A Google descontinuou o suporte à diretiva noindex no robots.txt em setembro de 2019. Para excluir páginas da pesquisa, utilize uma meta tag robots noindex ou um cabeçalho X-Robots-Tag em páginas que os motores possam rastrear.
O Googlebot respeita a diretiva Crawl-delay?
Não. O Googlebot ignora o Crawl-delay. Use o Search Console ou limites no servidor (código HTTP 429). O Bingbot, por sua vez, respeita o Crawl-delay em segundos inteiros.
Onde deve ser colocado o ficheiro robots.txt?
Tem de residir exatamente na raiz principal do domínio, acessível por HTTP/HTTPS em /robots.txt (ex.: https://exemplo.com/robots.txt). Subdiretórios não são válidos.
O robots.txt distingue maiúsculas de minúsculas?
Os nomes das diretivas não são sensíveis a maiúsculas. No entanto, os caminhos de URL são: "Disallow: /Admin" bloqueia /Admin/ mas NÃO bloqueia /admin/.
Pronto para acompanhar as suas posições e a saúde do seu site?
Monitorize palavras-chave diariamente, vigie backlinks e audite problemas técnicos com o TrueRanker. Teste 14 dias grátis.