Pourquoi le crawler Gunfinder visite-t-il mon site web ?
Tu as détecté dans les fichiers journaux de ton serveur web des visites avec l’User-Agent Gunfinder/3.1 — probablement via un lien vers cette page ? Pas de souci : c’était notre crawler, tout est en ordre.
Que fait le crawler sur ton site ?
Gunfinder est un moteur de recherche de produits pour chasseurs et tireurs sportifs. Pour que nos utilisateurs trouvent des offres à jour, notre crawler visite régulièrement les sites web et boutiques que nous avons référencés comme source, et y collecte les produits et prix.
Le crawler s’identifie dans l’en-tête User-Agent comme Gunfinder/3.1 et renvoie à cet article, pour que tu puisses immédiatement savoir qui visite ton site. Les versions plus anciennes s’appelaient Gunfinderbot — si tu vois ce nom dans d’anciens logs, c’est le même crawler.
Si ta boutique est listée chez nous comme source, le crawler passe régulièrement pour garder ton offre à jour. Tu le verras donc souvent dans tes logs. Il reste volontairement discret et consulte les pages à un rythme modéré.
Ces réseaux IP tu devrais les autoriser
Pour que tes produits apparaissent de manière fiable et rapide sur Gunfinder, ajoute nos réseaux en exception dans ton pare-feu, ton limiteur de débit ou ta détection de bots :
- 213.95.112.96/27 (IPv4)
- 2001:780:274:1::/64 (IPv6)
Important : Certains pare-feux et offres d’hébergement bloquent systématiquement tout visiteur dont le User-Agent contient le mot « bot ». Vérifie au besoin que ta détection de bots laisse passer le User-Agent Gunfinder/3.1 et ces deux réseaux — sinon tes produits n’apparaîtront pas ou avec retard dans notre recherche.
Encore mieux : un flux de données
Si tu tiens une boutique, il y a une méthode plus confortable que le crawling : avec un flux de données, tu transmets automatiquement et intégralement ton stock à Gunfinder. Tu trouveras comment faire avec ton système de boutique dans la catégorie Flux de données pour Dealer.
Tu ne veux pas être crawlé ?
Pas de souci — contacte-nous rapidement, et nous retirerons ton site de la rotation. Nous serons tout aussi heureux de réintégrer ta boutique si tu souhaites que tes produits apparaissent sur Gunfinder.