Webmaster Libre

Desarrollo web con software libre

Buscador

Robots malos

Ralf Kloth ha publicado en su sitio un listado con los robots «malvados» que le han visitado.
Ralf considera que un robot es malo tanto si es un spambot como si es, simplemente, un bot que no respeta el archivo robots.txt y los banea de su sitio por métodos más radicales, a nivel de servidor.

Sin duda es algo que todos deberíamos hacer, por un lado evitaremos que los spambots recopilen direcciones de email en nuestros sitios y por otro evitamos pagar el ancho de banda consumido por robots poco respetuosos…

List of Bad Bots

Otras entradas

Esta entrada fue publicada por Alma Fernández el Viernes, 1 de Septiembre de 2006 y está archivada en: Enlaces. Puedes dejar un comentario, o enviar un trackback desde tu sitio.

Comentar:

Algunas etiquetas HTML permitidas:

<a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>

Blogalaxia BlogESfera - Directorio de Blogs Hispanos Web Developement Blogs - BlogCatalog Blog Directory