SEO
robots.txt Validator
Valide o robots.txt — estrutura de grupos User-agent, diretivas, teste de um caminho específico para permitir/bloquear.
Se você informar apenas o domínio, /robots.txt será adicionado. Não funcionará em todos os sites — alguns bloqueiam requisições entre domínios (CORS); se o carregamento falhar, abra o robots.txt em uma nova aba e cole o conteúdo manualmente.