Définition
L'analyse de logs (log analysis) consiste à étudier les fichiers journaux du serveur web pour comprendre le comportement des robots des moteurs de recherche (Googlebot, Bingbot, etc.) sur un site. Les logs révèlent quelles pages sont crawlées, a quelle fréquence, quels codes HTTP sont retournes et combien de budget de crawl est consomme. Cette analyse permet d'identifier les problèmes de crawl (pages non explorées, pages inutiles crawlées excessivement, erreurs serveur) et d'optimiser le budget de crawl pour favoriser l'indexation des pages prioritaires.
Points clés à retenir
- Révèle le comportement réel de Googlebot sur votre site
- Identifie les gaspillages de budget de crawl
- Outils populaires : Screaming Frog Log Analyser, Oncrawl, Botify
Exemples concrets
Gaspillage de crawl
L'analyse des logs révèle que Googlebot passe 60% de son temps a crawler des pages de filtres sans valeur SEO. La mise en place de directives robots.txt libère le budget pour les pages produits.
Détection de problèmes
Les logs montrent que 200 pages retournent des erreurs 500 intermittentes que les outils de crawl classiques ne détectent pas. La correction des erreurs serveur restaure l'indexation.
Questions fréquentes
C'est la seule méthode pour voir exactement ce que Googlebot fait sur votre site : quelles pages il visite, combien de fois, et quelles erreurs il rencontre. La Search Console donne des informations partielles, les logs donnent la vérité complète.
Screaming Frog Log Analyser (abordable), Oncrawl et Botify (entreprise) sont les plus utilisés. Pour les petits sites, une analyse manuelle avec Excel ou des scripts Python est possible.
Termes liés
Aller plus loin avec LemmiLink
Découvrez comment LemmiLink peut vous aider à mettre en pratique ces concepts SEO.
Dernière mise à jour : 2026-02-07