Ce que l’outil regarde

Testez aussi robots.txt

C’est le contrôle que presque personne ne fait, et celui qui révèle le défaut le plus grave. Si votre-site.fr/robots.txt répond en 5xx pendant une maintenance, ce n’est pas l’exploration d’une page qui s’arrête : c’est celle du site entier.

Ce n’est pas un cas d’école. Sur cinq extensions de maintenance mesurées, deux laissent passer exactement ce défaut.

La même chose en ligne de commande

Cet outil ne fait rien qu’un terminal ne sache faire. Si vous en avez un, ces deux lignes suffisent :

curl -I https://votre-site.fr/
curl -I https://votre-site.fr/robots.txt

L’outil existe pour les cas où vous n’en avez pas sous la main, et pour traduire le résultat en langage clair.

Ce que l’outil ne fait pas

Il n’enregistre rien : ni l’adresse testée, ni le résultat. Il ne suit pas les redirections, pour ne pas raconter l’état d’une page que vous n’avez pas demandée. Et il refuse les adresses privées — un outil qui va chercher n’importe quelle URL sur demande devient vite un relais pour explorer des réseaux qui ne le regardent pas.