Robots.txt . c'est possible d'avoir un tit topo vite fait?

[@Rano]

Salut,

j'avais jusqu'à présent pas porté attention à ce petit fichier... puis je me dis que s'il existe ca doit etre pour quelque chose.
Il est vraiment utile ?
Il doit ressembler à quoi ?

Et concrètement, pouvait me dire ce que ca apporte ?
Merci bcp

 

[deblok]

Et si rano utiliser la fonction " Rechercher dans les forums" sur la page https://www.webrankinfo.com/forum/search/ ?

 

[@Rano]

désolé je l'avais oublié

 

[hetzeld]

Salut,

Tu as aussi la page http://www.robotstxt.org/wc/exclusion.html qui est complète mais en anglais...

Dan

 

[Eservice]

Et si Rano (de Bergerac) utilisait la recherche de "robots.txt" sur le site ( https://www.webrankinfo.com/recherche.php ), il trouverait par exemple cette discussion https://www.webrankinfo.com/forum/t/a-propos-des-fichiers-robots-txt.991/ et bien d'autres

 

[@Rano]

Je suis (Pas Rano) de Bergerac :-D