Fran6 m’a signalé, et à juste titre, qu’il y avait une erreur dans mon fichier robots.txt
Cette petite erreur la voila :
Disallow: /2005
Disallow: /2006
Disallow: /2007
J’ai oublié de placer /$ à la fin de ces 3 règles…
Ce qui veut dire que toutes les adresses du type :
http://www.herewithme.fr/2007/quelquechose
Ne seront plus indexé par les moteurs de recherche… Autrement dit une catastrophe d’un point de vue référencement… vu que j’ai bloqué tous les articles de mon blog !
La bonne écriture est:
Disallow: /2005/$
Disallow: /2006/$
Disallow: /2007/$
J’ai donc corrigé l’article et mes robots.txt par la même occasion.
D’ailleurs si vous avez un doute à propos de votre fichier robots.txt et de son action, les outils Webmaster de Google permettent de tester les règles en ligne.
Je peux donc vous affirmer que mon robots.txt ne comporte plus de problème ;)
[...] Edit: Cet article a été mise à jour le 30/08. Il y avait un bug dans l’exemple de robots.txt que je donnais. Plus d’explication dans l’article suivant. [...]
Oué, et c’est moi qui l’ai signalé à Fran6, na. :P
Je me disais que mon trafic avait diminué monstrueusement sans trop comprendre pourquoi… maintenant je sais !
Passé de près de 200 visites/jour à une vingtaine ça se remarque vite ! :p
Sacré AmO !
:D
Oui oui :)