Perché il crawler di Gunfinder visita il mio sito?
Hai trovato nei log del tuo webserver visite con lo User-Agent Gunfinder/3.1 — probabilmente con un link a questa pagina? Tranquillo: era il nostro crawler, e va tutto bene.
Cosa fa il crawler sul tuo sito?
Gunfinder è un motore di ricerca di prodotti per cacciatori e tiratori sportivi. Per permettere ai nostri utenti di trovare offerte aggiornate, il nostro crawler visita regolarmente i siti web e i negozi che abbiamo inserito come fonte, raccogliendo lì prodotti e prezzi.
Il crawler si identifica nell’header User-Agent come Gunfinder/3.1 e collega a questo articolo, così puoi subito capire chi visita il tuo sito. Le versioni precedenti si chiamavano Gunfinderbot — se trovi questo nome in vecchi log, si tratta dello stesso crawler.
Se il tuo negozio è elencato da noi come fonte, il crawler passa a intervalli regolari per mantenere aggiornate le tue offerte. Lo vedrai quindi spesso nei tuoi log. Si muove con moderazione e visita le pagine a un ritmo contenuto.
Queste reti IP dovresti sbloccarle
Per far sì che i tuoi prodotti appaiano su Gunfinder in modo affidabile e veloce, inserisci le nostre reti come eccezione nel tuo firewall, rate-limiter o rilevatore di bot:
- 213.95.112.96/27 (IPv4)
- 2001:780:274:1::/64 (IPv6)
Importante: Alcuni firewall e pacchetti hosting bloccano in modo generico ogni visitatore che ha la parola „bot“ nello User-Agent. Controlla in caso di dubbio se il tuo rilevatore di bot lascia passare lo User-Agent Gunfinder/3.1 e le due reti — altrimenti i tuoi prodotti non compariranno o compariranno con ritardo nella nostra ricerca.
Ancora meglio: un feed di dati
Se gestisci un negozio, c’è un modo più comodo del crawling: con un feed di dati trasferisci automaticamente e completamente il tuo inventario a Gunfinder. Come funziona con il tuo sistema di negozio lo scopri nella categoria Feed di dati per Dealer.
Non vuoi essere scansionato?
Nessun problema — contattaci brevemente e rimuoveremo il tuo sito dalla rotazione. Allo stesso modo, saremo felici di includere il tuo negozio se vuoi che i tuoi prodotti appaiano su Gunfinder.