Informations sur le robot

LunadeskBot

LunadeskBot est le robot d’exploration qu’utilise Lunadesk pour lire les pages web publiques que ses clients ont ajoutées comme source de connaissances.

Pourquoi LunadeskBot visite-t-il mon site ?

Un client de Lunadesk a ajouté des pages de ce site comme source de connaissances pour son assistant de support. LunadeskBot lit ces pages afin que l’assistant puisse répondre aux questions à partir du contenu de ces pages.

Nous n’explorons que les URL et les motifs configurés par ce client, sur un seul domaine.

Comment identifier LunadeskBot

Chaque requête de LunadeskBot porte exactement ce User-Agent :

LunadeskBot/1.0 (+https://lunadesk.ai/bot)

Le nom à utiliser dans robots.txt est LunadeskBot.

Ce que fait LunadeskBot, et ce qu’il ne fait pas

Ce qu’il fait

Lit et respecte robots.txt, y compris Crawl-delay. robots.txt est relu au plus une fois toutes les 24 heures.
Respecte <meta name="robots" content="noindex"> et l’en-tête X-Robots-Tag.
Lit sitemap.xml une fois par jour pour trouver les pages, et utilise lastmod pour éviter les visites inutiles.
Rythme courtois : une seule requête à la fois par site, avec au moins 1 seconde entre deux requêtes (davantage si votre Crawl-delay le demande).
Visite automatiquement une même page au plus une fois par jour. Les pages inchangées sont visitées de moins en moins souvent, jusqu’à une fois par semaine.
Utilise des requêtes conditionnelles (If-None-Match / If-Modified-Since) : une page qui n’a pas changé ne vous coûte presque rien.
Si votre serveur rencontre un problème temporaire (délai dépassé, erreur 5xx), il réessaie une page au plus 3 fois, à 30 minutes d’intervalle, puis reprend son rythme normal.
Ne lit que des pages publiques. Il ne se connecte jamais à un compte, ne soumet jamais de formulaire et ne contourne jamais un paywall.
Ne visite jamais d’adresses réseau privées ou internes.

Ce qu’il ne fait pas

Ne télécharge pas les PDF ni les autres fichiers. Il note seulement qu’ils existent.
N’utilise pas votre contenu pour entraîner des modèles d’IA. Le texte sert uniquement de référence à l’assistant de support du seul client qui a ajouté votre site.

Comment contrôler ou bloquer LunadeskBot

Ajoutez l’une de ces règles au fichier robots.txt situé à la racine de votre site.

# Bloquer entièrement LunadeskBot
User-agent: LunadeskBot
Disallow: /

# Bloquer une section
User-agent: LunadeskBot
Disallow: /private/

# Le ralentir (secondes entre deux requêtes)
User-agent: LunadeskBot
Crawl-delay: 10

Les modifications sont prises en compte sous 24 heures, car robots.txt est relu au plus une fois par jour.

Questions sur LunadeskBot

Réponses courtes pour les propriétaires et administrateurs de sites.

LunadeskBot exécute-t-il le JavaScript ?

À quelle fréquence reviendra-t-il ?

Je ne sais pas qui a configuré cela. Puis-je faire retirer mon site ?

Contact

Des questions ou des inquiétudes à propos de LunadeskBot ? Écrivez à bot@lunadesk.ai.