Notre robot
ConformRadarBot
Notre robot ne parcourt pas le web de lui-même. Il ne lit un site que lorsqu'une personne demande une vérification sur conformradar.com.
Identification
ConformRadarBot/0.1 (+https://conformradar.com/robot)
Comment il se comporte
- il lit d'abord le fichier robots.txt et respecte ses interdictions ;
- une requête par seconde au plus, 14 pages au plus par vérification ;
- 2,5 Mo au plus par page, images et scripts non téléchargés ;
- pages publiques uniquement : aucun formulaire envoyé, aucune connexion, aucun ajout au panier ;
- une même boutique n'est pas relue plus d'une fois par demi-heure : un rapport récent est réutilisé.
Bloquer le robot
Ajoutez ces lignes au fichier robots.txt de votre site. Les vérifications suivantes s'arrêteront avant de lire la moindre page.
User-agent: ConformRadarBot
Disallow: /
Contact
Pour signaler un comportement anormal ou faire retirer un rapport : contact@twaino.com.