Global ToolBox

Gerador de robots.txt

Crie um ficheiro robots.txt válido com um gerador de regras visual — defina regras Allow/Disallow por rastreador, adicione um sitemap e um crawl-delay, depois copie ou transfira.

🔒 Processado localmente no seu navegador

Loading…

Como usar

  1. Escolha uma predefinição de início rápido — "Permitir tudo" permite que qualquer rastreador indexe todo o seu site, "Bloquear tudo" bloqueia por completo qualquer rastreador, ou comece com "Personalizado" para criar as suas próprias regras.
  2. Para cada grupo de regras, defina o user-agent (use * para todos os rastreadores, ou o nome de um bot específico como o Googlebot) e adicione regras Allow ou Disallow para os caminhos pretendidos.
  3. Opcionalmente, defina um crawl-delay por grupo e adicione o URL do seu sitemap — ambos são adicionados automaticamente ao ficheiro gerado.
  4. Copie o robots.txt gerado a partir da pré-visualização, ou transfira-o diretamente — depois carregue-o para a raiz do seu domínio (por exemplo, https://example.com/robots.txt).

Funcionalidades

  • Predefinições de um clique "Permitir tudo" e "Bloquear tudo" para os casos mais comuns
  • Gerador de regras visual — adicione ou remova grupos de user-agent e regras Allow/Disallow sem escrever sintaxe manualmente
  • Crawl-delay opcional por grupo e um campo para o URL do sitemap
  • Resultado gerado em direto que se atualiza instantaneamente ao editar as regras
  • 100% no navegador — as suas regras nunca saem do seu navegador

Perguntas frequentes

Onde devo colocar o ficheiro robots.txt?

Carregue-o para a raiz do seu domínio, para que fique acessível em https://oseudominio.com/robots.txt. Os motores de busca só procuram o ficheiro exatamente nesse local.

O robots.txt impede mesmo os motores de busca de rastrear o meu site?

É um pedido, não uma imposição. Rastreadores bem-comportados, como o Googlebot, respeitam-no, mas nada impede um bot malicioso ou mal-comportado de o ignorar por completo. Não conte com ele para ocultar conteúdo sensível.

O que significa o campo User-agent?

Indica a que rastreador um grupo de regras se aplica. Use * para abranger todos os rastreadores, ou o nome de um bot específico (como o Googlebot ou o Bingbot) para lhe atribuir regras diferentes dos restantes.

Preciso de uma linha Sitemap?

É opcional, mas recomendável — indica aos rastreadores onde está o seu sitemap.xml, para que descubram as suas páginas de forma mais eficiente. Deixe o campo em branco se ainda não tiver um.

O crawl-delay é respeitado por todos os motores de busca?

Não. É suportado por alguns rastreadores (como o Bing), mas ignorado por outros (o Google já não o respeita no robots.txt). Utilize antes a Google Search Console para controlar a taxa de rastreio do Google.

Ferramentas relacionadas