[PB Indexation] Robots.txt et sitemap.xml

Nouveau WRInaute
Bonjour à tous,

J'ai donc mis en ligne un nouveau site la semaine dernière. http://pandadub.fr/

Problème classique, lorsque j'envoie mon sitemap.xml à google, j'obtiens cette erreur :
Le sitemap contient des URL qui sont bloquées par le fichier robots.txt

Et ce pour l'intégralité de mes pages (18 pages)

Pourtant, mon robots.txt semble OK.

URL robots.txt : http://pandadub.fr/robots.txt
URL sitemap : http://pandadub.fr/sitemap.xml

Si quelqu'un peut regarder mes fichiers et m'éclairer.... ce serait très sympa.

Merci beaucoup

Bonne journée,

matt
 
Olivier Duffez (admin)
Membre du personnel
Bienvenue sur WRI !

refais ton robots.txt qui contient plein de lignes en trop : "allow" ne fait pas partie du standard initial, ça ne sert à rien de les mettre. A moins que tu aies confondu avec disallow ?

ensuite, déclare ton sitemap dans GWT et pas dans le robots.txt

si besoin, lis mon tuto sur le sitemap XML
 
Nouveau WRInaute
Merci pour vos réponses,

En fait, à la base, mon robots.txt était tout simple

Et google refusait mon sitemaps

C'est pourquoi j'ai rajouté les ligne Allow, car Google me disait que mon sitemap était bloqué par robots.txt

Suite à mes lignes Allow, Google a accepté mon sitemap mais m'indique que toutes mes pages sont bloquées par mon robots.txt
 
Nouveau WRInaute
En fait, ça vient peut être de là :

"Googlebot n'a pas pu accéder à votre fichier robots.txt et a différé l'exploration de votre site plutôt que de risquer d'explorer des URL non autorisées."

D'où cette erreur peut elle venir ?
 
Discussions similaires
Haut