Bloquer robot explorateurs .htaccess

[Océane_beaute]

Bonjour,

Je souhaite bloquer l'exploration de mon site à certains robots via .htaccess

j'ai trouvé des listes par ex
RewriteCond %{HTTP_USER_AGENT} ^BlackWidow [OR]
RewriteCond %{HTTP_USER_AGENT} ^Bot\ mailto:craftbot@yahoo.com [OR]
RewriteCond %{HTTP_USER_AGENT} ^ChinaClaw [OR]
........
Mais ou trouver une liste actualisée?
Enfin, sur google analytics, j'ai deux URL qui me visite que je souhaite bloquer.

http://buttons-for-website.com/

Comment faire?
Merci pour votre aide

 

[ybet]

Je suis assez à la page sur le blocage (même un peu trop peut-être).

Je commence par ta liste: pas la peine d'en trouver une actualisée, la majorité des robots se cachent derrière de faux users_agents (y compris des plages brésiliennes qui se cachent derrière Googleboot :mrgreen: ).

Chez moi, il y a trois niveaux de vérification:
1. une programmation en php qui bloque les adresses IP visiteurs qui analysent trop de pages dans un temps déterminés.
2. htaccess sur des plages d'adresses (généralement des plages de serveurs)
3. pour les plus forts (russes, Ukraine, chinois, ...) carrément par iptables de plages sur le serveur (avec l'avantage que ca bloque tous les types d'accès mais plus dangereux).