Snaglist
crawler
¿Qué es este visitante?
Snaglist visita sitios web en nombre del propietario o su agencia, para encontrar problemas técnicos. Carga una página cada vez, con una pausa, y respeta robots.txt. Para bloquearlo, usa User-agent: Snaglist en robots.txt.
User-agent: Snaglist
snaglist.eu