Voilà le contenu de mon fichier actuel:
"User-agent: ia_archiver
Disallow: /"
 
Je voudrai interdire à TOUS les robots, d'aller matter le répertoire XYZ, comment dois je configurer mon robots.txt ?  
 
"User-agent: ia_archiver
Disallow: /
User-agent: *
Disallow: /XYZ/"  
   ??

[jfdsdjhfuetppo]--Message édité par B-52--[/jfdsdjhfuetppo]

La syntaxe correcte définit des "règles d'autorisation" pour chaque "robot".
 
Ainsi, par exemple, ton fichier robots.txt aura :
 
User-agent : *  <----- interdire à TOUS les robots
Disallow: /tmp/ <---- répertoire/fichiers interdits
Disallow: /tmp/docs/
Disallow: /secret.html
 
User-agent : googlebot
Disallow : /hidden/
 
User-agent : cybermapper
Disallow : /doc.htm
 
Attention, on ne peut pas utiliser de wildcards genre *.htm ou ?truc?.htm? dans la liste des interdits.

[jfdsdjhfuetppo]--Message édité par Indiana Jones--[/jfdsdjhfuetppo]

Merci infiniment