# Aca empieza User-agent: * Allow: /wp-content/uploads/ Disallow: /wp-content/plugins/ Disallow: /wp-content/themes/ Disallow: /wp-includes/ Disallow: /wp-admin/ # # Activa el Bot de Imágenes de Google User-agent: Googlebot-Image # # Aparte por las dudas Disallow: /wp- # # También podemos desindexar todo lo que empiece # # Sigue con otra los ficheros Sitemap: http://www.zoofiliagratis.com.ar/sitemap.xml Disallow: /?s= Disallow: /search # # Aca empieza User-agent: * Allow: /wp-content/uploads/ Disallow: /wp-content/plugins/ Disallow: /wp-content/themes/ Disallow: /wp-includes/ Disallow: /wp-admin/ # # Activa el Bot de Imágenes de Google User-agent: Googlebot-Image # # Aparte por las dudas Disallow: /wp- # # También podemos desindexar todo lo que empiece # # Sigue con otra los ficheros Sitemap: http://www.zoofiliagratis.com.ar/sitemap.xml Disallow: /?s= Disallow: /search # # Aqui ya comienza con los feed # Allow: /feed/$ Disallow: /?s= Disallow: /?ref= Disallow: /feed Disallow: /comments/feed Disallow: /feed/$ Disallow: /*/feed/$ Disallow: /*/feed/rss/$ Disallow: /*/trackback/$ Disallow: /*/*/feed/$ Disallow: /*/*/feed/rss/$ Disallow: /*/*/trackback/$ Disallow: /*/*/*/feed/$ Disallow: /*/*/*/feed/rss/$ Disallow: /*/*/*/trackback/$ # # Motores de busqueda # User-agent: MSIECrawler Disallow: / User-agent: WebCopier Disallow: / User-agent: HTTrack Disallow: / User-agent: Microsoft.URL.Control Disallow: / User-agent: libwww Disallow: / # # Consumo de servidor # User-agent: noxtrumbot Crawl-delay: 50 User-agent: msnbot Crawl-delay: 30 User-agent: Slurp Crawl-delay: 10 # # Permite todo el resto Allow: /* User-agent:* Disallow: /mt/ Disallow: /tag/ Disallow: /mt/mt-