Robots.txt: un file importante | SEO linee guida (Parte 11)
Robots.txt è un file di semplice testo che ci aiuta a limitare l’indicizzazione di alcune pagine o files del nostro sito.
Può sembrare strano il non voler indicizzare alcune pagine, ma se pensiamo alle aree di registrazione utenti sui siti dinamici, aree riservate o files che hanno usi specifici per il funzionamento del nostro sito, come ad esempio una cartella di upload, tutto diventa molto chiaro e vediamo subito che questo file diventa estremamente utile per evitare di indicizzare contenuti non necessari.
Ma robots.txt non serve soltanto a non indicizzare alcune pagine, serve anche a far sì che vengano messi… Continua a leggere