CRAWL & ANALYSE DE LOGS

Watussi.fr Jean-Benoît MOINGT - @jeanbenoit

Fonctionnement d’un moteur

Crawl Indexation Ranking

30 000 000 000 000

En comparaison…

URLs connues par Google

Distance Terre - Soleil (en cm)

Dette de la France (euros)

Capitalisation boursière Apple (dollars)

Etoiles dans notre Galaxie

Population mondiale

Premier index Google

En comparaison…

URLs connues par Google

Distance Terre - Soleil (en cm)

Dette de la France (euros)

Capitalisation boursière Apple (dollars)

Etoiles dans notre Galaxie

Population mondiale

Premier index Google

700 000 000 pages / seconde

Google doit faire des choix

…il faut l’aider !

Crawler de site

1. Mesure de la volumétrie

2. Contrôle des codes retour

12 3. Taux de présence des balises

4. Calcul du PageRank

5. Temps de réponse

Et plein d’autres choses

Nombre de liens entrants / sortants par pages

Taux de duplicate content

Pages « inutiles »

Vérification de plan de taggage

…tout est envisageable…

Analyse de logs serveur

Volumes de crawl

Erreurs

Nouvelles pages

Mots clés

Et plein d’autres choses…

Coupler crawl + logs

Pages orphelines

Taux de crawl / profondeur

Taux de pages actives / profondeur

Efficacité des catégories

Jean-Benoît Moingt

Dresseur de Googlebot

@jeanbenoit

http://www.watussi.fr

Questions ?