Il file robots.txt su Wordpress | Nothing2Hide

Iscriviti alla newsletter o ai miei feed RSS per ricevere gli aggiornamenti del blog automaticamente!

Il file robots.txt su Wordpress

Poichè ho notato dalle statistiche di accesso al blog, che spesso gli spider (Google in testa) cercano nella root del sito il file “robots.txt” e non lo trovano, ho deciso di “accontentarli” creandone uno con il seguente contenuto:

User-agent: *
Disallow: /wp-
Disallow: /feed/
Disallow: /trackback/

Questo dovrebbe servire a far si che tutti gli spider non tentino inutilmente di indicizzare direttamente i files di Wordpress. C’è poi chi dice che questo file è buona norma crearlo anche se non ci sono aree da escludere, e quindi con un contenuto di questo tipo:

User-agent: *
 Disallow:

Aggiungi 'Il file robots.txt su Wordpress' a Del.icio.us

Aggiungi 'Il file robots.txt su Wordpress' a digg

Aggiungi 'Il file robots.txt su Wordpress' a Yahoo My Web

Aggiungi 'Il file robots.txt su Wordpress' a Stumble Upon

Aggiungi 'Il file robots.txt su Wordpress' a Segnalo

Aggiungi 'Il file robots.txt su Wordpress' a OKnotizie

Aggiungi 'Il file robots.txt su Wordpress' a Bookmark.it

Aggiungi 'Il file robots.txt su Wordpress' a Diggita

Aggiungi 'Il file robots.txt su Wordpress' a FaceBook

Aggiungi 'Il file robots.txt su Wordpress' a Upnews

Aggiungi 'Il file robots.txt su Wordpress' a Wikio

Sottoscrivi il mio feed RSS

Ti è piaciuto l'articolo? Sottoscrivi ora il feed RSS!

Scritto il 28 Febbraio, 2007 alle 20:01 in Web

Condividi | Tags: Google, robots_txt, statistiche_di_accesso, user_agent, Web

Ancora nessun commento »

Feed RSS dei commenti di questo post. TrackBack URI

Lascia un commento

Valid XHTML and CSS. ^Top^

Chiudi

Web Sociale
Invia e-mail