Gerador de robots.txt
Crie o robots.txt do site: bloqueie pastas, robôs de IA e indique o sitemap.
Seus dados são processados diretamente no seu navegador.
Como usar o robots.txt
O arquivo fica na raiz do domínio (exemplo.com.br/robots.txt) e orienta os robôs sobre o que rastrear. Atenção: bloquear no robots.txt não remove uma página do Google — para isso use a meta tag noindex (e deixe a página rastreável para o Google ver o noindex). Nunca bloqueie CSS e JavaScript necessários para a página aparecer. Bloquear robôs de IA impede o uso do conteúdo para treinar modelos, mas só funciona com quem respeita o arquivo.