Screaming Frog SEO Spider est un logiciel de crawling qui parcourt un site web lien après lien, comme le robot d'un moteur de recherche, et liste les problèmes techniques qui freinent son référencement naturel. Gratuit jusqu'à 500 URL, il coûte 245 € par an en version payante et s'utilise en quatre temps : installation, configuration, crawl, puis analyse des onglets.
L'outil a beaucoup changé au fil de ses dernières versions. Quatre versions majeures, de la 22 à la 25, ont ajouté l'analyse sémantique, un serveur MCP qui relie le crawler aux assistants IA, la comparaison automatique des crawls et des tableaux de bord personnalisés.
Ce guide détaille la prise en main du SEO Spider, son prix, la méthode pour mener un audit SEO technique et les nouveautés à connaître. Il s'adresse autant aux débutants qu'aux équipes d'une agence SEO qui crawlent des sites tous les jours.
Qu'est-ce que Screaming Frog SEO Spider ?
Screaming Frog SEO Spider est un crawler de bureau : il se télécharge, s'installe sur votre ordinateur et explore les URLs d'un site en suivant ses liens internes. Pour chaque page, il relève le code de réponse HTTP, les balises, les directives pour les robots, le contenu et les liens.
Le logiciel sert surtout à trois usages :
- mener l'audit technique d'un site : erreurs, redirections, pages non indexables, contenu dupliqué ;
- préparer et recetter une refonte ou une migration, plan de redirections compris ;
- contrôler un site dans la durée, grâce aux crawls planifiés et à leur comparaison.
Il ne fournit ni mots-clés ni backlinks sans intégration tierce : il complète les suites de notre sélection des meilleurs outils SEO, sans les remplacer.
Screaming Frog est-il gratuit ? Prix de la version gratuite et de la licence
Screaming Frog est gratuit jusqu'à 500 URL par crawl. Au-delà, la version payante coûte 245 € par licence et par an, d'après la page tarifs de l'éditeur. La licence est valable un an, puis elle se renouvelle.
Le prix baisse avec le volume : 235 € par licence de 5 à 9 licences, 219 € de 10 à 19, puis 209 € à partir de 20. La version gratuite suffit pour découvrir l'outil ou contrôler un petit site vitrine. Dès que le site dépasse 500 URL, ou qu'il faut régler le crawl et conserver ses résultats, la licence devient nécessaire.
Comment installer et configurer Screaming Frog ?
L'installation prend quelques minutes : vous téléchargez le SEO Spider sur le site de l'éditeur, vous lancez l'installateur, puis vous réglez la mémoire et la configuration du crawl avant la première exploration.
Téléchargement et installation
Le SEO Spider est disponible pour Windows, macOS et Linux (Ubuntu et Fedora). L'éditeur demande au minimum un système 64 bits et 4 Go de mémoire vive disponibles.
Sans licence, le logiciel démarre en version gratuite. Après l'achat, vous saisissez votre identifiant et votre clé de licence dans le logiciel pour débloquer la version payante.
Mémoire et mode de stockage
Le mode de stockage se règle dans « File > Settings > Storage Mode ». Le stockage en base de données, activé par défaut, écrit le crawl sur le disque : il l'enregistre automatiquement et convient aux gros sites. Le stockage en mémoire garde tout en RAM et se réserve aux petits crawls.
La mémoire allouée se règle dans « File > Settings > Memory Allocation ». L'éditeur recommande 4 Go alloués pour un crawl allant jusqu'à 2 millions d'URLs, et une machine dotée d'un SSD et de 16 Go de RAM au-delà d'un million d'URLs.
Configuration du crawl
Le menu « Configuration > Spider » définit ce que le crawler explore et enregistre. Les réglages à vérifier avant chaque crawl sont les suivants :
- les ressources à explorer : images, CSS, JavaScript, liens externes ;
- le respect du fichier robots.txt et des directives noindex, canonical et nofollow ;
- le rendu JavaScript (« Configuration > Spider > Rendering »), indispensable sur les sites dont le contenu est injecté par script ;
- les limites : profondeur, nombre d'URLs, et depuis la version 23 un plafond d'URLs par sous-domaine ;
- les règles Include et Exclude, qui restreignent le crawl à un répertoire ou écartent des URLs à paramètres.
Une fois réglée, la configuration s'enregistre comme profil pour être réutilisée sur vos prochains projets.
{{audit-primary="/cta"}}
Comment faire un audit SEO technique avec Screaming Frog ?
Pour auditer un site, saisissez son URL dans la barre du haut, cliquez sur « Start », puis lisez les résultats onglet par onglet. Chaque onglet isole une famille de contrôles, et ses filtres mènent directement aux URLs en erreur.
- Lancez le crawl en mode Spider sur la page d'accueil.
- Ouvrez l'onglet « Issues », qui classe les problèmes détectés par type et par priorité.
- Passez en revue les onglets « Response Codes », « Page Titles », « Meta Description », « H1 », « Content », « Images » et « Links ».
- Exportez les URLs concernées, corrigez, puis recrawlez pour vérifier.
Cette lecture s'intègre à une démarche plus large, détaillée dans notre guide pour réussir son audit SEO.
Codes de réponse, liens cassés et redirections
L'onglet « Response Codes » classe chaque URL selon son code HTTP : 200, 3xx, 4xx ou 5xx. Le filtre des erreurs client liste les liens cassés, et l'onglet inférieur « Inlinks » indique les pages qui pointent vers chaque erreur 404.
Les redirections se contrôlent au même endroit. Le rapport « Reports > Redirects » isole les chaînes et les boucles, et la version 23 y a ajouté « Redirects to Error », qui repère les redirections aboutissant à une erreur. Chaque redirection 301 interne doit pointer directement vers une page en 200.
Balises title, meta description et H1
Les onglets « Page Titles », « Meta Description » et « H1 » signalent les balises manquantes, dupliquées, trop longues ou trop courtes. La longueur est mesurée en caractères et en pixels, ce qui permet d'anticiper une troncature dans les résultats de recherche.
Contenu dupliqué et attributs ALT des images
L'onglet « Content » détecte les pages strictement identiques et les contenus presque dupliqués, selon un seuil de similarité réglable dans « Configuration > Content > Duplicates ». Depuis la version 22, il signale aussi les pages sémantiquement proches, même quand le texte est dupliqué avec d'autres mots.
L'onglet « Images » liste les images trop lourdes et celles dont les attributs ALT sont absents. La version 25 y ajoute le contrôle de l'attribut title manquant.
Liens internes, profondeur et pages orphelines
L'onglet « Links » et la colonne « Crawl Depth » montrent comment les liens internes distribuent la popularité : pages trop profondes, pages peu liées, ancres vides. La version 24 y ajoute un filtre sur les liens non explorables, par exemple un lien porté par une balise span ou par un attribut onclick.
Pour trouver une page orpheline, le crawl seul ne suffit pas, puisqu'aucun lien n'y mène. Il faut connecter le sitemap XML, Google Analytics ou la Search Console, puis lancer l'analyse de crawl.
Export et rapport
Chaque onglet s'exporte en CSV, en Excel ou vers Google Sheets, et le menu « Bulk Export » regroupe les exports en masse. Depuis la version 22, « Bulk Export > Multi Export » enregistre une sélection d'exports et de rapports, livrée en un clic dans un seul classeur à plusieurs onglets.
Quelles sont les dernières nouveautés de Screaming Frog ?
Les quatre dernières versions majeures de Screaming Frog vont dans trois directions : l'intelligence artificielle, l'automatisation des crawls et le suivi des changements d'un crawl à l'autre.
Version 25 : tableaux de bord, problèmes configurables et onglet Social
La version 25 rend le SEO Spider plus simple à adapter à chaque projet. Ses principales nouveautés sont les suivantes :
- un onglet « Dashboard » pour composer ses tableaux de bord avec des graphiques, des compteurs et des tableaux, puis les partager ou les exporter ;
- des problèmes configurables : chaque contrôle de l'onglet « Issues » peut être désactivé, ou changer de type et de priorité ;
- un onglet « Social » qui vérifie les balises Open Graph et X Card ;
- un ralentissement automatique du crawl quand le serveur renvoie des codes 429 ou 503 ;
- l'exclusion de liens selon leur emplacement dans la page, par exemple une navigation à facettes ;
- des fichiers de configuration au format JSON, lisibles et modifiables dans un éditeur de texte.
Version 24 : le serveur MCP et la comparaison automatique
La version 24 permet de piloter le SEO Spider depuis un assistant IA. Son serveur MCP expose les données de crawl à Claude, à LM Studio et à d'autres assistants : vous demandez en langage naturel de lancer un crawl, d'exporter un rapport ou de croiser deux jeux de données.
Le serveur MCP s'active dans « File > Settings > MCP Server ». Il demande une licence payante et le mode de stockage en base de données, et l'éditeur précise que toutes les fonctions du logiciel ne sont pas encore prises en charge.
La même version compare automatiquement les deux derniers crawls planifiés d'un projet. L'e-mail de fin de crawl résume alors ce qui a changé (pages apparues ou disparues, hausse des pages non indexables, titles supprimés) et peut joindre les exports utiles à chaque destinataire.
Versions 22 et 23 : l'analyse sémantique par embeddings
La version 22 a introduit l'analyse de similarité sémantique. Le SEO Spider transforme le contenu de chaque page en embeddings, grâce à un fournisseur d'IA connecté (OpenAI, Gemini, Anthropic ou Ollama), puis compare les pages sur leur sens et non sur leurs mots.
L'outil repère ainsi les pages proches qui risquent de se cannibaliser, isole les contenus hors sujet et affiche les clusters de contenu dans un diagramme (« Visualisations > Content Cluster Diagram »).
La version 23 a complété l'ensemble. Elle permet de limiter la comparaison sémantique à certains modèles d'URLs, ce qui sert à rapprocher un site de préproduction du site en ligne pour bâtir un plan de redirections.
{{rdv-primary="/cta"}}
Quelles fonctions avancées de Screaming Frog utiliser ?
Quatre fonctions avancées font gagner le plus de temps en audit : le mode liste, l'extraction personnalisée, les intégrations Google et le contrôle de ce que lisent les robots des moteurs IA.
Mode liste et recette d'une migration
Le mode liste crawle une liste d'URLs fournie au lieu de suivre les liens d'un site. Il sert à recetter un plan de redirections : vous importez les anciennes URLs, vous activez le suivi des redirections, puis vous vérifiez que chacune aboutit à une page en 200.
Extraction personnalisée et expressions régulières
Le menu « Configuration > Custom » ajoute des colonnes sur mesure au rapport de crawl. La recherche personnalisée repère les pages qui contiennent, ou non, un texte ou un motif défini par une expression régulière. L'extraction personnalisée récupère n'importe quel élément du code HTML, par exemple un prix, un fil d'Ariane ou un bloc de données structurées.
Google Analytics, Search Console et PageSpeed Insights
Le menu « Configuration > API Access » connecte le crawler à Google Analytics, à la Search Console et à PageSpeed Insights. Chaque URL crawlée reçoit alors ses sessions, ses clics, ses impressions et ses indicateurs de performance.
Ce croisement révèle les pages explorées qui ne génèrent aucun trafic. Pour savoir ce que Googlebot explore réellement, il se complète par une analyse de logs.
Vérifier ce que lisent les robots des moteurs IA
Un crawl sans rendu JavaScript montre le contenu disponible pour les robots qui n'exécutent pas les scripts, ce qui est le cas d'une partie des robots des assistants IA. Si le texte principal d'une page disparaît dans ce crawl, il est aussi absent pour eux.
Le menu « Configuration > User-Agent » change l'identité du crawler, pour tester la réponse du serveur à un robot précis. Ce contrôle se double d'une relecture du fichier robots.txt, qui peut bloquer ces robots sans que personne ne l'ait décidé.
Comment datashake exploite le crawl dans ses audits SEO et GEO
Chez datashake, le crawl est le point de départ de l'audit technique, pas son aboutissement. Un outil comme Screaming Frog relève des milliers de données, mais toutes ne pèsent pas sur la visibilité : le travail consiste à trier, à prioriser par impact, puis à suivre les corrections.
L'audit de datashake couvre plus de 100 points de contrôle : SEO technique, sémantique, popularité et visibilité dans les moteurs IA. L'équipe SEO et GEO de datashake y associe un outil propriétaire de monitoring, qui suit la présence d'une marque dans les réponses de ChatGPT, de Perplexity et des AI Overviews.
FAQ
Screaming Frog, c'est quoi ?
Screaming Frog SEO Spider est un logiciel de crawl SEO édité par l'agence britannique Screaming Frog. Il explore les pages d'un site comme un moteur de recherche et signale les erreurs techniques : liens cassés, redirections, balises manquantes, contenu dupliqué, pages non indexables.
Quel est le prix de Screaming Frog ?
La licence de Screaming Frog coûte 245 € par an et par utilisateur. Le prix descend à 235 € dès 5 licences, puis à 209 € à partir de 20. La version gratuite reste utilisable sans limite de durée, jusqu'à 500 URL par crawl.
Comment utiliser Screaming Frog quand on débute ?
Installez le logiciel, saisissez l'URL de votre site et cliquez sur « Start ». Ouvrez ensuite l'onglet « Issues », qui classe les problèmes par priorité, puis traitez d'abord les erreurs 4xx, les redirections en chaîne et les balises title manquantes ou dupliquées.
Qu'est-ce que le serveur MCP de Screaming Frog ?
Le serveur MCP, apparu avec la version 24, relie le SEO Spider à un assistant IA comme Claude ou LM Studio. L'assistant peut alors lancer un crawl, lire ses résultats et produire des exports à partir d'une simple consigne. Cette fonction est réservée à la version payante.


