Fichier indiquant aux moteurs de recherche ce qu’ils peuvent lire et intégrer dans leurs index ou ce qui leur est interdit (une page ou toutes les pages d’un répertoire)
Ce fichier doit être placé à la racine du site et son nom, robots.txt, doit être écrit en minuscules. Ce sera le premier fichier recherché et lu par les robots des différents moteurs de recherche.
Commentaires récents