BLOG

IA | Automatisation de processus
Webmaster Webdesigner
Webmarketing

 

Comment fonctionne le robots.txt

Comment fonctionne le robots.txt

Qu'est-ce que c'est le fichier robots.txt ? Un fichier robots.txt est un fichier texte situé à la racine de votre site. Il sert à empêcher les robots d’exploration à d’accéder à tout ou une partie d’un site web. On appelle cela :  le protocole d’exclusion des robots....