par Jean-Benoît | Oct 15, 2012 | SEO
Le mouvement de grève n’aura finalement duré qu’une grosse journée. Les bots ont commencé à évacuer leur lieu de travail jeudi vers 13h pour une quasi-interruption de service vers 22h. Le mouvement a été particulièrement suivi vendredi avec un taux de...
par Jean-Benoît | Oct 12, 2012 | SEO
Phénomène très surprenant depuis quelques heures : Googlebot est en grève ! Le principal boulot d’un moteur de recherche, c’est de crawler le web. Et bien… depuis quelques heures, Google a (presque) arrêté de le faire. C’est @Lagiirafe qui...
par Jean-Benoît | Août 25, 2012 | Non classé
Lorsque l’on analyse des logs serveur, il est fréquent de devoir dé-dupliquer de très gros fichiers. A titre d’exemple, j’ai eu besoin récemment de dé-dupliquer un fichier de 51 millions de lignes (1,4 Go). Avec Excel, cela semble compromis…...
par Jean-Benoît | Juil 6, 2012 | SEO
J’ai parlé à plusieurs reprises de l’impact des performances sur le volume de pages crawlé par Googlebot. Voici un exemple concret. Mise en prod -> dégradation des performances -> chute de crawl. La sanction est immédiate. Amélioration des...
par Jean-Benoît | Fév 10, 2012 | SEO
Voici un petit graphique représentant, sur une période de plusieurs semaines, le volume de crawl par bots d’un site francophone lambda. (cliquez pour agrandir) Cinq petits constats : Google est seul au monde, 5 des 6 bots les plus actifs lui appartiennent. Le...
