Construis un fichier robots.txt valide par groupes de règles, sans te soucier de la syntaxe exacte attendue par les robots d'indexation.