O arquivo robots.txt no Wordpress
Como já assinalado nas estatísticas de acesso aos blogs, que muitas vezes aranhas (Google na liderança) olhando para o site raiz do arquivo robots.txt e não encontrá-lo, eu decidi "resolver" criar um com o seguinte teor:
User-agent: * Disallow: / wp -- Disallow: / alimentação / Disallow: / trackback /
Isso deve servir para garantir que todas as aranhas não estão tentando, em vão, o índice arquivos diretamente para Wordpress. Depois, há quem diga que este arquivo é uma boa idéia para criá-lo mesmo que existam áreas a serem excluídas e, em seguida, com um conteúdo deste tipo:
User-agent: *
Disallow: Ainda não há comentários »
Comentários feed RSS para esse post. TrackBack URI
Deixe um comentário
Nothing2Hide © 2006 Todos os direitos reservados.
Licença | Aviso
Fechar
- Social Web
- Enviar e-mail






























