Google propose un générateur de fichier robots.txt

Le fichier robots.txt est un fichier texte contenant des commandes à destination des robots d'indexation des moteurs de recherche afin de leur préciser les pages qui peuvent ou ne peuvent pas être indexées.

Google proposent depuis cette semaine un nouvel outil : un générateur de fichier « robots.txt ».

• C’est quoi le « robots.txt »?

Ainsi tout moteur de recherche commence l’exploration d’un site web en cherchant le fichier robots.txt à la racine du site.

L’outil que Google met a notre disposition génère  le fichier robots.txt  que vous n’avez plus qu’à copier/coller et à transférer sur votre site.

Un outils pratique pour tout Webmaster.