Una lista de IPs de bots y crawlers muy interesante
By
Luigi Keynes on marzo 24th, 2009
Hace unos días les comentaba que un bot, con su comportamiento molesto y abusivo, estaba generando problemas en uno de mis servidores.
Fernando Plaza ha confeccionado un listado de unos 800 bots y crawlers, con sus respectivas IPs y User-Agents, y puede consultarse en esta dirección.
El autor de la lista promete ir actualizándola.
Posts Relacionados:
- La lista de los términos más buscados en AOL
- Obama lanza una clara advertencia a los robots
- Una lista actualizada de datacenters de Google
- Baneando robots molestos
No Comments