Robots.TXT

Il Robots.txt è un file con estensione .txt che viene creato per dire ai crawler dei motori di ricerca quale pagine del sito web visitare e quali no. Il file robots.txt viene inserito nella root principale del sito. Si può indicare nel file a quali motori di ricerca ci si riferisce. I motori di ricerca possono seguire il suggerimento ma non hanno l’obbligo di seguirlo. (Per i termini “crawler”, “motori di ricerca” “root” si rimanda alle rispettive voci su questo Glossario)

Scritto da    |   novembre 12th, 2018   |   Nessun commento

Lascia un commento