Crawl error 403

[claudecote]

Bonjour,

lorsque j'utilise le webmaster tools de Google, j'obtiens plein d'erreurs de type 403.

Tant que je n'aurais pas réglé ces messages, je n'arriverai pas à référencer mon site

En passant, c'est un site qui a été faite avec Google Site

Est-ce qu'il y quelqu'un qui peut m'aider pour régler ces problèmes qui commencent vraiment à m'énerver

Merci de bien vouloir me répondre.

 

[mipc]

sans le nom de domaine du site on fait comment !!!?

 

[claudecote]

www.bestgolfingsecrets.com

 

[shaman99]

Les erreurs 403 c'est un Accès refusé.
Tu n'aurais pas quelque chose comme "Options -Indexes" dans ton .htaccess ?

 

[mipc]

bon déjà voici se que donner l'entête HTTP analyser par webrankinfo.com

-https://www.webrankinfo.com/outils/header.php?url=http%3A%2F%2Fwww.bestgolfingsecrets.com&ua=googlebot

HTTP/1.1 200 OK
Content-Type: text/html; charset=utf-8
X-Robots-Tag: noarchive
Last-Modified: Tue, 01 May 2012 17:06:41 GMT
ETag: "1335892001475|#public|0|en|||0"
Expires: Tue, 01 May 2012 17:15:12 GMT
Date: Tue, 01 May 2012 17:15:07 GMT
Cache-Control: public, max-age=5
Content-Length: 33305
X-Content-Type-Options: nosniff
X-XSS-Protection: 1; mode=block
Server: GSE

voir dans GWT tu va dans analyser comme googlebot là: -https://www.google.com/webmasters/tools/googlebot-fetch?hl=fr&siteUrl=http://www.bestgolfingsecrets.com

tu peux nous donner quel pages renvoie un 403, parceque j'ai beau chercher et en utilisant user agent googlebote j'ai toujours du 200 OK.

 

[claudecote]

Je ne te saisis pas

Est-ce que tu pourrais me donner plus de détails. Merci

 

[mipc]

quant je teste la plus par des page avec se site: https://www.webrankinfo.com/outils/header.php

en utilisant l'user agent googlebot, tous semble OK avec un 200 pour chaque page du site, donc dans GWT donne nous les pages qui génère une réponse en 403.

 

[claudecote]

quand je navigue à l'intérieur de mon site, je n'ai aucun message d'erreur, c'est juste lorsque j'utilise GWT - Option Crawl error que j'obtiens tous ces erreurs

en voici quelques unes

home
403
4/29/12

my-blog
403
4/29/12

home/home
403
4/28/12

home/home/golf-terms
403
4/28/12

5
home/home/golf-rules-1
403
4/27/12

 

[mipc]

bon y a plus que ça, montre nous ton .htaccess et si tu peux ton httpd.conf ôtez des login et mot de passe si il y en a!!!!

ainsi que toute autres fichiers de configuration, important quel méthode de compression des fichier utilise tu, deflate ou Gzip ou Zlib ou ZIP ou une autre, en suite quel méthode d'implémentation de configuration de la compression, exemple si tu appel Gzip d'une certaine façon les bots de google peuvent avoir du mal à comprendre le code.

un exemple: https://www.webrankinfo.com/forum/erreur-mysterieuse-avec-rich-snippets-tes ... l#p1360078

 

[claudecote]

comment aller chercher cette information?

 

[mipc]

se sont des fichier de configuration qui sont à la racine du répertoire sauf pour httpd.conf tu peux ne pas y avoir accès c'est normal sur du mutualiser.

 

[claudecote]

je fait ce site via google site, je n'ai pas le contrôle sur ces fichiers

 

[mipc]

alors y a surement un rapport de maintenance sur google site, qui te permet de faire une réclamation!!!

 

[claudecote]

Au niveau de mon “domain administrator” la configuration est la suivante

Host name : @
ip adresse/url : http://www.bestgolfingsecrets.com/
record type : url redirect (301)

Host name : www
ip adresse/url : ghs.google.com.
record type : CNAME (Alias)


Sub-domain setting

est-ce que je doit ajouter home, my-blog etc à la configuration de mes sous-domaine?

c'Est peut-être la raison de mes messages, quand pensez-vous

 

[shaman99]

Montre nous ton .htaccess et éventuellement le robot.txt qui doivent être à la racine de ton site.

 

[claudecote]

voici mon robot.txt
User-agent: *
Disallow: /feeds
Disallow: /*/_/
Sitemap: http://www.bestgolfingsecrets.com:80/system/feeds/sitemap

pour ce qui est du .htacess je ne sais pas comment le trouver via google site

 

[mipc]

voici mon robot.txt
User-agent: *
Disallow: /feeds
Disallow: /*/_/
Sitemap: http://www.bestgolfingsecrets.com:80/system/feeds/sitemap

pour ce qui est du .htacess je ne sais pas comment le trouver via google site

j'ai fait une recherche sur ceci:

Disallow: /*/_/

http://stackoverflow.com/questions/4837450/my-robots-txt-is-user-agent ... -its-means

 

[claudecote]

est-ce que je dois modifier le robot ???

 

[mipc]

sincèrement, j'en sais rien, je ne sais même pas si c'est ça le problème, il nous manque un paramètre!!!!

tu n'a pas d'autres fichier de configuration, je pense qu'il faut posé la question à google, et éventuellement sur un forum de google pour google site.

 

[shaman99]

Désactive le robot.txt attend quelques jours pour voir s'il y a de nouveau des erreurs 403.