TldrSeoBot

À propos de TldrSeoBot

TldrSeoBot est le robot d’exploration que j’utilise pour TLDR SEO. Il parcourt des sites web pour en réaliser une analyse SEO technique : structure des titres (Hn), données structurées (Schema.org), indexabilité, maillage interne, etc.

Comment l’identifier

Il se présente toujours avec cet user-agent :

Mozilla/5.0 (compatible; TldrSeoBot/1.0; +https://tldr-seo.fr/bot)

Vous voulez l’autoriser dans votre pare-feu ou votre CDN (Cloudflare…) par adresse IP ? Écrivez-moi, je vous communique l’IP de mon robot.

Mes engagements

    • Respect du robots.txt — il suit les règles du groupe User-agent: * et celles qui le nomment explicitement.

    • Respect du Crawl-delay — si votre robots.txt demande un délai entre les requêtes, il le respecte.

    • Exploration légère — requêtes espacées dans le temps pour ne pas surcharger votre serveur.

    • Lecture seule — uniquement des requêtes GET : il ne remplit aucun formulaire, ne se connecte à aucun compte et ne modifie rien.

    • Ressources mises en cache — les fichiers CSS déjà vus ne sont pas retéléchargés, pour limiter les requêtes.

    • Temporisation en cas d’erreur — en cas de souci de connexion, il patiente et réessaie plutôt que d’insister.
    • Aucune donnée personnelle — il n’analyse que la structure technique des pages.

Contrôler TldrSeoBot

L’autoriser : aucune action nécessaire, il explore ce qui est ouvert aux robots.

Le bloquer entièrement, via votre robots.txt :

				
					User-agent: TldrSeoBot
Disallow: /

Bloquer seulement une partie :

				
					User-agent: TldrSeoBot
Disallow: /dossier-prive/

Ralentir son exploration — indiquez un délai (en secondes) entre les requêtes :

				
					User-agent: TldrSeoBot
Crawl-delay: 5

Me contacter

Une question, une gêne, une demande de ralentissement ou d’exclusion ? Écrivez-moi à nicolas@tldr-seo.fr