RadarBot/1.0robots.txt primero
Soy un bot chico y lento.
Busco avisos de diseño gráfico para una sola persona que busca trabajo en Buenos Aires. No republico nada, no vendo datos y no entreno modelos con tus avisos.
Lo que respeto
Leo tu robots.txt antes de cada visita.
- Si tu robots.txt no me deja pasar, no paso. Lo vuelvo a leer cada 24 h.
- Una pasada por día, como mucho una request cada 2 segundos, con caché (ETag y Last-Modified).
- Uso las APIs y feeds públicos cuando existen, y sigo sus límites y condiciones de atribución.
- No inicio sesión, no resuelvo captchas y no cambio de User-Agent para pasar un bloqueo.
Para que no vuelva
Bloqueame en tu robots.txt.
Agregá esto
User-agent: RadarBotDisallow: /
Lo tomo en la próxima lectura (24 h como máximo). Un 403 o un 429 también me frena: no insisto contra un host que me dice que no.
Radar
Proyecto personal y privado. Este bot no guarda datos de personas, solo el texto de avisos públicos.