KautharBot
KautharBot : ce qu'il fait et comment l'arrêter
KautharBot est le robot utilisé par le service « SEO & visibilité IA » de Kauthar pour auditer les sites que leurs propriétaires ont connectés. Il n'explore jamais un site dont le propriétaire ne l'a pas demandé.
Comment il s'identifie
Chaque requête porte le User-Agent suivant et un lien vers cette page :
Mozilla/5.0 (compatible; KautharBot/1.0; +https://kautharai.com/en/bot)
Les règles qu'il respecte
- Il n'audite que les sites connectés à Kauthar par leurs propriétaires et dont la propriété est prouvée ; avant cette preuve, il ne dépasse jamais la page d'accueil.
- Il lit robots.txt et respecte Disallow et Crawl-delay (groupe KautharBot puis « * ») ; une page interdite n'est jamais demandée.
- Une requête à la fois par site, espacée d'au moins une demi-seconde, et il se retire en cas de 429 ou 503.
- Il redemande avec If-None-Match / If-Modified-Since : les pages inchangées ne sont pas retéléchargées.
- Un plafond de pages par site fixé par l'offre du propriétaire, et aucune page au-delà de 2 Mo.
- Il ne collecte aucune donnée personnelle, ne remplit aucun formulaire et n'exécute pas de JavaScript.
Comment le bloquer
Ajoutez ces deux lignes au robots.txt à la racine de votre site et KautharBot cesse de demander toute page :
User-agent: KautharBot
Disallow: /
Ou bloquez un chemin précis et ralentissez-le :
User-agent: KautharBot
Disallow: /private/
Crawl-delay: 2
robots.txt est lu avant chaque audit ; le changement s'applique dès l'audit suivant.
Contact
Si vous voyez des requêtes qui ne respectent pas ces règles, écrivez-nous avec le domaine et l'heure de la requête : [email protected]
Laissez Kauthar répondre à votre place dès aujourd'hui
Inscrivez-vous avec votre numéro de téléphone, importez vos fichiers et partagez le lien avec vos clients. Kauthar s'occupe du reste, jour et nuit.
Découvrir le tableau de bord avec un compte démo
Essai gratuit de 14 joursSans carte bancaireOpérationnelle en quelques minutes