crawler.sh

crawler.sh en bref

crawler.sh est un outil d'exploration de sites qui fonctionne sur votre ordinateur. Il analyse les pages, extrait leur contenu en Markdown et repère des problèmes de référencement. Vous pouvez vous en servir depuis une application de bureau ou en ligne de commande. Les agences, les consultants et les équipes techniques disposent ainsi d'un même outil pour examiner un site et récupérer ses contenus dans des formats réutilisables.

Vous lancez une exploration, consultez les anomalies et exportez les résultats pour préparer vos corrections. L'analyse signale notamment les liens cassés, les titres manquants et les descriptions dupliquées. Les exports de contenu peuvent servir à une migration ou à préparer une base documentaire pour un système d'IA. Le traitement local évite une facturation à la page. La version gratuite limite chaque session à 50 pages ; l'abonnement Pro couvre l'application et la ligne de commande.

Fonctions principales

• Exploration de sites depuis votre ordinateur
• Extraction du contenu principal en Markdown
• Repérage des liens cassés et des titres manquants
• Détection des descriptions dupliquées
• Export des anomalies en CSV et TXT
• Export en JSON et génération de plans de site XML
• Interface de bureau et ligne de commande

Cas d'usage

• Auditer les pages d'une boutique avant une mise en ligne
• Extraire les articles de votre site pour une migration
• Préparer une base documentaire pour un assistant IA
• Exporter les anomalies à corriger pour un client

Tarifs

Prix relevés lors de notre test, à vérifier sur le site officiel avant de vous abonner.