Utiliser Screaming Frog pour l'audit technique : ce que personne ne vous dit sur la priorisation
Un client m'appelle un lundi matin, paniqué. Son trafic a chuté de 40 % en trois semaines. Il a déjà lancé un crawl Screaming Frog, exporté un CSV de 12 000 lignes, et il est noyé. « J'ai 4 300 erreurs 404, je commence par quoi ? » Voilà le vrai problème. Pas l'outil. Jamais l'outil.
Le crawl, c'est la partie facile. Screaming Frog vous crache des milliers de lignes en quelques minutes. Le travail qui compte commence après, quand il faut décider quoi réparer d'abord avec le peu de temps dont vous disposez. Et là, la plupart des guides vous laissent tomber.
Points clés à retenir
- Un crawl brut ne sert à rien tant qu'il n'est pas filtré : sur un site de 10 000 URLs, moins de 20 % des erreurs méritent une action immédiate.
- L'ordre de traitement importe plus que le volume : erreurs d'indexation d'abord, puis redirections, puis contenu dupliqué, détails cosmétiques en dernier.
- Screaming Frog ne voit pas le rendu JavaScript côté client ni les Core Web Vitals de terrain. Il faut croiser avec Search Console.
- Segmentez toujours par gabarit de page (fiche produit, article, catégorie) avant d'analyser quoi que ce soit.
- La restitution client passe par un tableau de bord, pas par un export CSV de 12 000 lignes.
- Le meilleur audit est celui qu'on peut exécuter en deux semaines, pas celui qui liste 400 corrections.
Segmenter avant d'analyser : l'étape que tout le monde saute
Je vais être direct : si vous ouvrez l'onglet « Response Codes » et que vous regardez la liste brute, vous perdez votre temps. J'ai fait cette erreur pendant mes deux premières années de freelance. Je livrais des rapports de 60 pages que personne ne lisait. Un jour, un directeur e-commerce m'a dit : « Concrètement, je répare quoi cette semaine ? » Je n'avais pas de réponse claire.
Pourquoi segmenter par gabarit change tout
Sur un site e-commerce classique, une fiche produit cassée et une page catégorie cassée n'ont pas le même poids. La fiche produit, souvent, ne reçoit presque aucun trafic organique. La catégorie, elle, peut concentrer des centaines de visites par jour. Pourtant, dans votre export, les deux apparaissent comme « 404 » sur la même ligne.
La méthode que j'applique maintenant :
- J'exporte le crawl complet en CSV.
- J'ajoute une colonne « gabarit » et je classe chaque URL par regex (par exemple
/produit/,/blog/,/categorie/). - Je croise avec les données de Search Console (clics, impressions) sur les 90 derniers jours.
- Je trie chaque gabarit par volume de clics décroissant.
Résultat : sur un projet récent, 312 erreurs 404 se sont réduites à 19 URLs réellement prioritaires. Les 293 autres étaient d'anciennes pages de tags sans aucun trafic. Réparer les 19 a suffi à enrayer la chute.
Dans quel ordre traiter les erreurs d'un audit technique
Voici la séquence que je défends, et je l'assume jusqu'au bout : l'indexation passe avant tout le reste, toujours. Une page qui ne peut pas être indexée n'existe pas pour Google, peu importe la beauté de son balisage.
Priorité 1 : les problèmes d'indexation
Cherchez d'abord les balises noindex posées par erreur, les blocages dans le fichier robots.txt, et les directives canoniques pointant vers la mauvaise URL. Une canonique mal configurée sur une page qui génère du chiffre, c'est une hémorragie silencieuse.
Dans Screaming Frog, l'onglet « Directives » vous montre rapidement les noindex et les canoniques. Filtrez sur les URLs qui reçoivent du trafic organique. Si une page à fort trafic est en noindex, vous venez de trouver votre priorité absolue.
Priorité 2 : les chaînes et boucles de redirection
Une redirection 301 simple, ça va. Une chaîne de quatre redirections qui aboutit à un 404, c'est un problème. Screaming Frog les détecte dans l'onglet « Redirect Chains ». Chaque saut supplémentaire dilue un peu le signal transmis et ralentit le chargement.
Sur un site que j'ai audité en début d'année, j'ai trouvé une boucle de redirection infinie sur la page « Nous contacter ». Le formulaire n'était accessible à personne. Le trafic organique sur cette URL était tombé à zéro, et personne ne s'en était rendu compte. Coût estimé : des dizaines de demandes de devis perdues chaque mois.
Priorité 3 : le contenu dupliqué et les paramètres d'URL
Ici, on entre dans le plus subtil. Les URLs avec paramètres (?sort=price, ?color=red) peuvent générer des milliers de variantes que Google explore pour rien. Screaming Frog les repère dans l'onglet « URL » avec le filtre « Contient ? ».
Ma règle : si une variante ne reçoit aucun clic après 90 jours, elle n'a pas besoin d'exister aux yeux des moteurs. On la neutralise via canonique ou via Search Console.
Ce que Screaming Frog ne détecte pas (et qui compte)
Attention à ne pas faire de l'outil une religion. J'ai vu des consultants livrer des audits impeccables sur le papier alors que le site ramait à mort sur mobile. Screaming Frog analyse le HTML servi par le serveur. Point.
| Problème | Screaming Frog | Outil complémentaire |
|---|---|---|
| Rendu JavaScript côté client | Non (sauf mode rendu activé) | Search Console, inspection d'URL |
| Core Web Vitals de terrain | Non | PageSpeed Insights, CrUX |
| Erreurs d'indexation réelles | Non | Search Console, rapport de couverture |
| Contenu rendu après interaction utilisateur | Non | Navigateur, DevTools |
| Problèmes de crawl budget sur gros sites | Partiellement | Logs serveur, JetOctopus |
Le workflow croisé que j'utilise systématiquement
Mon process tient en quatre étapes. D'abord, le crawl Screaming Frog pour l'inventaire technique. Ensuite, l'export des données Search Console pour identifier ce qui reçoit réellement du trafic. Puis, un croisement dans un tableur (ou Looker Studio si le client veut un suivi). Enfin, la priorisation selon l'impact business.
Ce croisement, c'est précisément ce que la plupart des guides oublient. Ils s'arrêtent au crawl. Or un crawl sans données de performance, c'est une carte sans légende.
Restituer un audit qui déclenche des actions
Un audit technique n'a de valeur que s'il est exécuté. Et pour être exécuté, il doit être compris. J'ai perdu des mois à produire des rapports exhaustifs que mes clients rangeaient dans un dossier. Aujourd'hui, je fais l'inverse : trois priorités maximum par sprint de deux semaines.
Concrètement, mon rapport client tient sur deux pages :
- Les 5 à 10 URLs qui coûtent le plus cher, chiffrées en trafic perdu
- L'action exacte à mener, en une phrase
- Le responsable (moi ou le développeur)
- Le délai
Le reste du crawl vit dans un tableau de bord partagé, que le client consulte s'il le souhaite. Mais mon livrable principal, c'est la liste courte.
Un exemple d'impact concret
Sur un site média que j'ai accompagné l'an dernier, l'audit complet a remonté plus de 2 000 erreurs. Nous en avons traité 34, réparties sur trois sprints. Deux mois plus tard, le trafic organique avait regagné 28 % et le nombre de pages indexées avait bondi. Les 1 966 erreurs restantes ? Toujours là. Et toujours sans impact mesurable.
Voilà pourquoi je milite pour un audit chirurgical plutôt qu'exhaustif. Franchement, personne n'a besoin de savoir que 400 images n'ont pas d'attribut alt sur des pages sans trafic.
Faut-il regarder ailleurs que Screaming Frog ?
Oui, partiellement. Screaming Frog reste mon outil principal, je ne vais pas prétendre le contraire. Mais sur des sites très volumineux (plus de 500 000 URLs), il atteint ses limites, surtout en version gratuite plafonnée à 500 URLs par crawl.
Deux alternatives méritent votre attention selon les cas :
- Sitebulb — interface plus pédagogique, utile quand on doit faire de la restitution à des non-techniciens
- JetOctopus — conçu pour l'analyse de logs sur de gros volumes
Pour la grande majorité des sites que j'audite (moins de 50 000 URLs), Screaming Frog payant à environ 200 € par an fait parfaitement le job. Inutile d'aller chercher plus loin.
Faut-il activer le rendu JavaScript dans Screaming Frog ?
Oui, dès que votre site repose sur un framework JavaScript (React, Vue, Angular). Le rendu JS ralentit considérablement le crawl, mais sans lui, vous analysez une coquille vide. J'active systématiquement le mode « JavaScript Rendering » sur ce type de site, quitte à crawler par lots pour ne pas saturer ma machine.
Combien de temps prend un audit technique complet ?
Comptez une à deux journées pour un site de 5 000 URLs, analyse et priorisation incluses. Le crawl lui-même tourne en 20 à 30 minutes. Le reste du temps part dans le croisement des données et la rédaction des recommandations. Si quelqu'un vous annonce un audit complet en deux heures, méfiez-vous.
La vraie compétence, ce n'est pas de crawler
N'importe qui peut installer Screaming Frog et lancer un crawl. La différence entre un audit utile et un rapport qui prend la poussière tient à une seule chose : le jugement sur ce qu'on ignore. Ce qui demande du métier, c'est de regarder 4 000 lignes et de dire « ces 20-là, maintenant, tout de suite ».
La prochaine fois que vous ouvrez un export de crawl, posez-vous une seule question avant de plonger : quelle est l'URL dont la réparation va faire bouger le plus de trafic cette semaine ? Commencez par celle-là. Le reste attendra. Il attendra même très bien, parce que la plupart du temps, il n'a jamais eu d'importance.