# Regla para todos los robots User-agent: * # Desautorizar directorios privados Disallow: /cgi-bin/ Disallow: /stats/ Disallow: /tag/ Disallow: /wp-admin/ Disallow: /wp-includes/ # Desautorizar archivos Disallow: /2005/ Disallow: /2006/ Disallow: /2007/ Disallow: /2008/ Disallow: /2005/* Disallow: /2006/* Disallow: /2007/* Disallow: /2008/* # Desautorizar extensiones dinamicas Disallow: /*.php$ Disallow: /*.js$ Disallow: /*.inc$ Disallow: /*.css$ Disallow: /*.gz$ Disallow: /*.wmv$ Disallow: /*.tar$ Disallow: /*.tgz$ Disallow: /*.cgi$ Disallow: /*.xhtml$ # Desautorizar indexar feeds y trackbacks pages y paginado Disallow: */feed/ Disallow: */trackback/ Disallow: /page/* # Desautorizar direcciones con parametros en la URL Disallow: /*?* Disallow: /*? # Googlebot images User-agent: Googlebot-Image # Permitir todo Allow: /* # Mediapartners Google User-agent: Mediapartners-Google* # Autorizar todo Allow: /*