Monte um robots.txt sem decorar a sintaxe
Escolha um ponto de partida, adicione blocos de user-agent com chips de adição rápida para rastreadores e caminhos comuns, e copie ou baixe o arquivo finalizado.
User-agent: * Disallow:
O que esta ferramenta cobre
As diretivas que realmente controlam o rastreamento.
Controle de rastreadores de IA
Chips de adição rápida para GPTBot, ClaudeBot e PerplexityBot ao lado de Googlebot e Bingbot, para permitir ou bloquear rastreadores de IA com a mesma intenção usada para os de busca.
Otimização do orçamento de rastreamento
Mantenha rastreadores fora de painéis administrativos, páginas de carrinho e busca interna, para que gastem mais tempo nas páginas que você realmente quer indexadas.
Descoberta do sitemap
Adiciona uma diretiva Sitemap: para que os rastreadores encontrem seu sitemap.xml sem que você precise enviá-lo separadamente.
Como funciona
Sem conta, sem chamada de API - tudo roda no seu navegador.
Escolha um ponto de partida
Permitir tudo, bloquear tudo, ou começar com um conjunto de regras em branco.
Adicione regras por rastreador
Defina um user-agent, depois adicione caminhos Disallow/Allow - os chips de adição rápida cobrem os mais comuns.
Copie ou baixe
Pegue o texto diretamente, ou baixe como robots.txt pronto para enviar à raiz do seu site.
Perguntas frequentes
Na raiz do seu domínio - https://exemplo.com/robots.txt. Ele não será lido em nenhum outro lugar, incluindo subdiretórios.
Não. Disallow diz a rastreadores bem-comportados para não buscarem uma página, mas se outros sites fizerem link para ela, o Google ainda pode indexar a URL sem visitá-la. Use uma meta tag noindex na própria página se precisar de garantia.
É uma decisão real e atual, sem uma resposta única correta - bloqueá-los mantém seu conteúdo fora dos dados de treinamento daquela empresa, mas também fora das superfícies de busca/resposta com IA que cada vez mais geram tráfego de referência. Decida bot a bot, não bloqueie por padrão.
Um Disallow: vazio sem caminho significa "não proibir nada" - equivale a permitir tudo para aquele user-agent, e é uma sintaxe válida e intencional para um bloco de "permitir tudo".
Outras ferramentas gratuitas
Gerador de meta tags
Crie título, descrição e tags sociais
Pré-visualização de snippet SERP
Veja como uma página aparece nos resultados do Google
Gerador de marcação Schema
Adicione dados estruturados para resultados avançados, prontos em JSON-LD
Testador de imagem OG
Verifique suas tags open graph e teste a imagem og
Leituras relacionadas
A Practical Guide to robots.txt and Sitemap.xml for SEO and AI Crawlers
What each file actually controls, the mistakes that accidentally block crawlers (human search engines and AI ones alike), and how to verify both are configured correctly.
Technical SEO Audit Checklist: 30+ On-Page & Technical Factors
Titles, canonical tags, structured data, crawlability, redirect chains - a concrete checklist instead of vague 'improve your SEO' advice.
Quer confirmar que os rastreadores realmente alcançam suas páginas?
Execute uma auditoria de site gratuita para verificar rastreabilidade, indexabilidade e prontidão para agentes de IA juntas.
Executar auditoria grátis