Si bien este podría ser un lector de sitio dedicado excepcional, dudo que fuera un humano de ningún tipo. Probablemente era un rastreador, un programa especial que “rastrea” sitios web, visitando una página y luego cada enlace en esa página. Por lo general, el software de seguimiento de visitantes como Google Analytics filtra esos bots, pero parece que uno se escapó.
En cuanto a por qué, la razón más común por la que las personas usan rastreadores es indexar sitios para motores de búsqueda. Para que Google funcione, necesita saber exactamente qué hay en miles de páginas. También podría ser un bot de archivo, como Wayback Machine, que conserva páginas para futuros lectores. Podría ser algún tipo de escaneo de mantenimiento regular de su proveedor de alojamiento web, o un bot escaneando su página web en busca de vulnerabilidades para hackear.
Si un rastreador golpea su sitio una y otra vez y ralentiza la página, puede bloquearlo. De lo contrario, ignóralo.
- ¿Cuál es la mejor manera de lanzar la primera startup?
- ¿Elegirías Django sobre PHP y SQL para tu aplicación web y por qué?
- ¿Cómo es usar New Relic en la producción?
- ¿Qué enfoque de prueba sigues al probar la aplicación web?
- ¿Cuáles son las amenazas de seguridad más comúnmente ignoradas en el desarrollo web?
