Bonjour à tous,
La question a certainement été posée de manière générale, mais je reprend la même question avec une petite variante.
Voilà, à la racine de mon site > Dossier A, j'ai un fichier robots.txt qui gère les dossiers à ne pas référencer.
Dans ce même dossier, j'ai un sous-dossier > Dossier B, que je ne veux pas voir référencé, mais qui ne devrait pas apparaître dans le fichier robots.txt, vu que mon robots.txt peut être lu par n'importe qui (Note: le dossier B contient des pages accessibles à des adresses URL rewritées).
La solution que j'ai trouvée, c'est de mettre un 2è fichier robots.txt avec comme paramètres : User-agent: * Disallow: /
Pouvez-vous me dire si cette solution est la meilleure ?
Merci d'avance pour votre collaboration
La question a certainement été posée de manière générale, mais je reprend la même question avec une petite variante.
Voilà, à la racine de mon site > Dossier A, j'ai un fichier robots.txt qui gère les dossiers à ne pas référencer.
Dans ce même dossier, j'ai un sous-dossier > Dossier B, que je ne veux pas voir référencé, mais qui ne devrait pas apparaître dans le fichier robots.txt, vu que mon robots.txt peut être lu par n'importe qui (Note: le dossier B contient des pages accessibles à des adresses URL rewritées).
La solution que j'ai trouvée, c'est de mettre un 2è fichier robots.txt avec comme paramètres : User-agent: * Disallow: /
Pouvez-vous me dire si cette solution est la meilleure ?
Merci d'avance pour votre collaboration