Vérifier la présence du fichier Robots.txt sur tous vos sites
Le fichier Robots.txt c’est quoi ? Le fichier robots.txt est un fichier texte utilisé pour le référencement des sites Internet, contenant des indicationsdestinés aux robots d’indexation des moteurs de recherche…
