VisiUpBot
VisiUpBot è il crawler che analizza i siti su richiesta degli utenti di VisiUp. Si identifica con lo user agent VisiUpBot.
Come si comporta
- Visita solo pagine pubblicamente accessibili, senza effettuare accessi né inviare moduli.
- Rispetta le regole di robots.txt indicate per
VisiUpBoto per tutti i crawler (User-agent: *), inclusoCrawl-delayfino a 5 secondi. - Effettua al massimo poche richieste contemporanee e si ferma al limite di pagine del piano dell'utente.
- Non visita indirizzi di reti interne o private.
Come bloccarlo
Aggiungi al file robots.txt del tuo sito:
User-agent: VisiUpBot Disallow: /
Per segnalazioni sull'attività del crawler puoi contattarci tramite i recapiti indicati nella pagina dei dati societari.

