User-agent: *
#Sitemap: http://www.tfe.es/sitemap.xml
#Disallow: /install.html EJEMPLOS
#Disallow: /*.js$
#Disallow: /2006/*
#Disallow: /2007/*
#Disallow: /articulos/*/pagina/*
Disallow: /admin/
Disallow: /backup/
Disallow: /cgi-bin/
Disallow: /include/
Disallow: /install/
Disallow: /javascripts/
Disallow: /libs/
Disallow: /style/
Disallow: /temp/
Disallow: /templates/
Disallow: /prueba/
Disallow: /foro/
Disallow: /demo/
#retraso en las nuevas busquedas para que no sature el servidor
Crawl-delay: 30