Reseñamos este interesante artículo de emezeta, sobre el fichero robots.txt. «Un archivo de texto que dicta unas recomendaciones para que todos los crawlers y robots de buscadores cumplan«. Explicaciones de uso, configuración y reglas expuestos de un modo sencillo y con ejemplos que a buen seguro nos serán de utilidad.
Secciones
Archivos
En tu e-mail
Daboweb día a día vía e-mail
Blogroll
- Antonio J Perez
- Apachectl
- Básico y fácil
- Blog Angelucho
- Caborian
- Cajon desastres
- Dabo (.es)
- Daboblog
- David Hernández
- Davidhm
- DebianHackers
- Emma Fernández
- Hackeando
- Liamngls
- Manuales-e
- Mont Blanc
- Nauscopio
- NoteBlog
- OneShot
- Security By Default
- Seguridad Jabalí
- Seguridad y Redes
- Seguros Autocaravana
- Sergio Hernando
- SInLaVeniA