Watussi.fr

10fév/124

Les plus gros crawlers du web

Voici un petit graphique représentant, sur une période de plusieurs semaines, le volume de crawl par bots d'un site francophone lambda.

(cliquez pour agrandir)

Cinq petits constats :

Google est seul au monde, 5 des 6 bots les plus actifs lui appartiennent.
Le constat serait probablement encore plus flagrant si le site étudié avait des vidéos, des news et achetait de l'adwords.
On trouve en bonne place d'étonnants "Content Crawler" et "Ezooms bot", je n'ai pas trouvé d'informations à leur sujet.
Bing est complètement à la rue !
Voila existe encore O_0

Sans même de parler de pertinence, le défi majeur d'un moteur de recherche est de tendre vers l'exhaustivité afin de pouvoir répondre aux requêtes les plus longue traîne possible.

Et à ce petit jeu, Google n'a pour l'instant aucun soucis à se faire.

Je cherche à réaliser le même graph pour un site chinois et un site russe, afin de voir la place prise par Yandex et Baidu. Si quelqu'un possède un site sur ces marchés, merci de me contacter

Remplis sous: Non classé 4 Commentaires

5fév/1224

Cartographie basique des blogs SEO

Je viens de découvrir le logiciel de cartographie Gephi.

Pour prendre le logiciel en main, j'ai décidé de réaliser une cartographie basique des blogs SEO francophone.

J'ai pour cela récupéré le top blog SEO de wikio du mois dernier.

J'ai ensuite crawlé chacun des blogs sur 3 niveaux de profondeur ("Watussi bot", vous m'avez peut-être vu passer dans vos logs ) afin de récupérer les liens dans les articles, en blogroll ou dans les commentaires.

Et voici le résultat :

Afficher au format SVG

Quelques constats :

- Sans surprise, la blogosphère SEO est très fortement interconnectée.

- Sylvain, Laurent et Paul sont les acteurs les plus visibles.

- Watussi.fr est un brin isolé

- Gephi est un superbe logiciel de visualisation que je compte bien continuer à apprivoiser.

Remplis sous: Non classé 24 Commentaires

5déc/112

Interview de Sébastien de Chezelles – Fondateur de 1001loisirs.com

Après plus d'un mois sans article, j'accueille aujourd'hui Sébastien de Chezelles, fondateur de 1001loisirs.com

Sébastien est également fondateur de JeuxVideoPC.com et d'une agence SEO : Web Conseils.

Un parcours atypique à découvrir : interview.

Remplis sous: Interview Lire la suite

22oct/1111

Optimisez la vitesse de votre site avec page_speed, le module Apache de Google

La vitesse du web est l'un des principes que défend Google depuis sa création.

Mieux que ça, il s'agit d'un élément fondamental de son ADN, en attestent ses interfaces toujours simples et épurées. Sa page d'accueil en est d'ailleurs l'exemple le plus marquant.

Au fur et à mesure de son développement, Google a créé de nombreux services et outils permettant de mesurer, d'améliorer, d'encourager la vitesse des sites internet.

Remplis sous: Non classé Lire la suite

19sept/1142

Adresses IPs et référencement

Par curiosité, je me suis amusé à constituer une base de 1 353 676 domaines du web francophone.

Pour chacun de ces domaines, j'ai récupéré l'adresse IP vers lequel il pointe.

Cet échantillon n'est par définition pas exhaustif, il n'a pas été établi selon une méthodologie statistique, mais je pense qu'il est suffisamment volumineux pour être représentatif du web francophone.

Voici quelques données qui me semblent intéressantes.

Remplis sous: SEO Lire la suite

6sept/1117

Screencast #4 – Comment spammer les forums avec Forum Bot

Je vous propose un rapide tutorial sur l'utilisation du logiciel Forum Bot.

Comment spammer les forums en créant des profils et des topics ?

Remplis sous: SEO 17 Commentaires

3juil/1124

Dotbot : Un robot bien sympathique

En consultant les fichiers logs de mon blog, je me suis aperçu qu'un petit nouveau était passé me rendre visite : Dotbot (welcome ).

Si il existe de très nombreux bots qui parcourent le web avec des objectifs plus ou moins cool (recherche d'adresses mails à spammer, recherche de failles de sécurités, domainers qui vous proposent d'acheter des NDD, ...), Dotbot est bien plus sympathique.

Remplis sous: SEO Lire la suite

6juin/1113

Test et avis de l’outil de suivi de positionnement MyPoseo

Tout webmaster / référenceur a eu un jour besoin de suivre le positionnement de son site sur des mots clés donnés.

Automatiser la chose est devenu un casse-tête tant Google fait la chasse aux requêtes automatisées sur son moteur.

C'est pour cela qu'est apparu quelques acteurs qui proposent de s'occupper de la chose. C'est le cas de MyPoseo qui m'a gentiment offert un an d'abonnement pour tester leur solution.

Remplis sous: SEO Lire la suite

26mai/116