AI Fit
LHG-AIFitProfiler
LHG-AIFitProfiler est le robot d’exploration derrière AI Fit, un outil gratuit de Lake House Group qui propose des workflows IA adaptés à une boutique en ligne. Si vous l’avez repéré dans les journaux de votre serveur, cette page explique ce qu’il a lu et comment l’arrêter.
Il s’identifie avec cet agent utilisateur :
LHG-AIFitProfiler/1.1 (+https://lakehousegrp.com/en/ai-fit/crawler/)Quand il passe
Il lit une boutique quand quelqu’un entre l’adresse de cette boutique dans AI Fit. Lake House Group l’utilise aussi sur une liste de boutiques pour établir les comparaisons qu’affiche AI Fit. Il ne parcourt pas le Web à la recherche de boutiques à lire.
Ce qu’il lit
Seulement des pages publiques, que n’importe qui peut ouvrir sans compte :
- robots.txt, une fois au début de la vérification
- la page d’accueil
- les plans de site (sitemaps) que publie la boutique
- le flux public des produits (/products.json sur Shopify, la Store API sur WooCommerce)
- un échantillon de pages publiques de produits, de collections, de blogue et d’information
Il envoie seulement des requêtes GET. Il n’exécute pas de JavaScript, ne conserve pas de témoins (cookies), ne se connecte à aucun compte, ne remplit aucun formulaire et n’ajoute rien à un panier.
Comment il respecte robots.txt
Il lit votre fichier robots.txt au début de la vérification et le suit jusqu’à la fin de celle-ci : les règles écrites pour LHG-AIFitProfiler, ou celles qui visent tous les robots (User-agent: *) quand aucune ne le nomme. Il ne demande aucune page que vous interdisez. Une modification de robots.txt s’applique à la vérification suivante, ou dans l’heure si une vérification dure plus longtemps. Il respecte aussi les lignes Crawl-delay et Request-rate.
À quel rythme il travaille
Pendant la vérification d’une boutique, il :
- envoie une requête à la fois, jamais deux en même temps
- lance chaque requête au moins une demi-seconde après la précédente, ou plus tard si votre Crawl-delay ou votre Request-rate le demande
- envoie au plus 256 requêtes
- n’envoie plus rien après une réponse 429 (trop de requêtes) ou 503 tant que le délai indiqué par votre en-tête Retry-After n’est pas écoulé, ou 30 secondes s’il n’y en a pas
- réessaie une requête refusée au plus deux fois
Comment le bloquer
Ajoutez ces deux lignes à votre fichier robots.txt :
User-agent: LHG-AIFitProfiler
Disallow: /Il lira alors votre robots.txt et rien d’autre de votre boutique. Pour l’écarter d’une partie de la boutique seulement, interdisez plutôt ce chemin, par exemple Disallow: /collections/. Ces lignes n’ont aucun effet sur les moteurs de recherche ni sur les autres robots. Si votre boutique répond 401 ou 403 à l’une de ses requêtes de page, il cesse aussi de la lire.
Questions
Écrivez-nous au moyen de notre page de contact ou à info@lakehousegrp.com, en indiquant l’adresse de votre boutique.