utiliser

Ce tutorial explique quels sont les textes à écrire dans un fichier robots.txt. Ce fichier doit être placé à la racine d'un site pour donner des informations aux robots.
Selon l'utilisation que vous en ferez il y a des tas de commandes que vous pouvez rédiger. L'avantage de ce tutorial c'est qu'il explique dans les grandes lignes les principales commandes, et il donne aussi des exemples concret qui sont souvent utilisé avec le robots.txt.