robots.txt tool su Google Sitemaps e nuove statistiche

Google Sitemaps ha introdotto un nuovo strumento per verificare la corretta impostazione del file robots.txt presente nei vari siti web.

Questo file è spesso utilizzato per limitare o impedire l’accesso a determinate directory del sito a tutti o ad alcuni motori. E’ bene precisare però che non tutti i motori rispettano i file robots.txt.

Lo strumento messo a disposizione da Google Sitemaps permette di verificare se l’attuale impostazione del file blocca o meno l’accesso alle proprie pagine da parte degli spider di Google.

Google Sitemaps ha anche introdotto nuove statistiche sul sito, come ad esempio quelle relative alle query più utilizzate e alla distribuzione del PageRank sulle varie pagine che compongono il sito.

Link: Google Sitemaps blog