Aller au contenu principal

Crawl de site

Open in QuickMonitoring→ Sites → [Votre site] → Nouveau scan

QuickMonitoring crawle chaque page de votre site à l'aide de Playwright — un vrai navigateur headless. Aucune installation de code requise. Il visite chaque page, capture une capture d'écran et enregistre toutes les ressources, les liens et la sortie console. Le crawl est la base de toutes les autres vérifications.

Ce que vous verrez​

Après avoir déclenché un scan, allez dans Sites → votre site → Scans (barre latérale) → sélectionnez le scan pour voir ses pages crawlées.

Chaque page crawlée est listée avec :

  • L'URL complète de la page
  • La miniature de la capture d'écran (cliquez pour agrandir)
  • Le code de statut HTTP
  • Le temps de chargement de la page

C'est la preuve que le crawler a réellement visité la page — pas seulement qu'elle existe.

Comment l'utiliser​

  1. Allez dans Sites → cliquez sur votre site
  2. Cliquez sur « Nouveau scan » ou « Lancer le scan »
  3. Attendez que le crawl se termine — la progression s'affiche en temps réel sur la page de détail du scan
  4. Allez dans Sites → votre site → Scans (barre latérale) → sélectionnez le scan pour parcourir toutes les URLs crawlées

Le crawler commence à votre URL racine et suit chaque lien interne qu'il trouve. Il ne crawlera pas les pages nécessitant une authentification, sauf si vous avez configuré des identifiants de contournement (voir Phase 4).

Condition de réussite​

✅ Vous avez obtenu ce badge lorsque votre scan affiche au moins 1 page crawlée avec une capture d'écran et un statut 200 OK.

Problèmes fréquents​

  • « 0 pages crawlées » — Vérifiez que l'URL de votre site est correcte et accessible publiquement. Les sites privés ou de pré-production derrière des listes blanches d'IP, des VPN ou une authentification HTTP basique bloqueront le crawler. L'URL doit être accessible depuis Internet ouvert.

  • Les captures d'écran sont vides ou n'affichent qu'une page blanche — Certains sites bloquent agressivement les navigateurs headless avec des systèmes de détection de bots. Essayez d'activer les délais de rendu JavaScript dans les paramètres du scan. Si le site utilise un rendu côté client intensif, le crawler peut avoir besoin de plus de temps pour laisser la page s'hydrater.

  • Pages manquantes attendues — Le crawler suit les liens. Si une page n'est liée nulle part, elle ne sera pas crawlée. Ajoutez-la au sitemap ou liez-la depuis une page crawlée. Vous pouvez également spécifier manuellement des URLs de départ supplémentaires dans les paramètres du site.

  • Le crawl s'arrête prématurément — Vérifiez le paramètre de profondeur de crawl. Une limite de profondeur trop faible arrêtera le crawler avant qu'il n'atteigne les pages profondément imbriquées. Augmentez-la dans la configuration du scan.