{\rtf1\ansi\ansicpg1252\deff0\deflang3082{\fonttbl{\f0\fswiss\fcharset0 Arial;}} {\*\generator Msftedit 5.41.15.1515;}\viewkind4\uc1\pard\f0\fs20 # \par # robots.txt para tu blog en WordPress. \par # \par # Usar bajo propia responsabilidad, que nos conocemos \}:) \par # http://www.sigt.net/desarrollo-web/robotstxt-para-wordpress.html \par #\par \par # Primero el contenido adjunto.\par \par User-Agent: * \par Allow: /wp-content/uploads/ \par Disallow: /wp-content/plugins/ \par Disallow: /wp-content/themes/ \par Disallow: /wp-includes/ \par Disallow: /wp-admin/\par \par # Tambi\'e9n podemos desindexar todo lo que empiece \par # por wp-. Es lo mismo que los Disallow de arriba pero \par # incluye cosas como wp-rss.php\par \par Disallow: /wp-\par \par # \par # Sitemap permitido, b\'fasquedas no. \par #\par \par Sitemap: http://persotemp.com.gt/portal/sitemap.xml \par Disallow: /?s= \par Disallow: /search\par \par # \par # Permitimos el feed general para Google Blogsearch. \par # \par # Impedimos que permalink/feed/ sea indexado ya que el \par # feed con los comentarios suele posicionarse en lugar de \par # la entrada y desorienta a los usuarios. \par # \par # Lo mismo con URLs terminadas en /trackback/ que s\'f3lo \par # sirven como Trackback URI (y son contenido duplicado). \par #\par \par Allow: /feed/$ \par Disallow: /feed \par Disallow: /comments/feed \par Disallow: /*/feed/$ \par Disallow: /*/feed/rss/$ \par Disallow: /*/trackback/$ \par Disallow: /*/*/feed/$ \par Disallow: /*/*/feed/rss/$ \par Disallow: /*/*/trackback/$ \par Disallow: /*/*/*/feed/$ \par Disallow: /*/*/*/feed/rss/$ \par Disallow: /*/*/*/trackback/$\par \par # \par # A partir de aqu\'ed es opcional pero recomendado. \par #\par \par # Lista de bots que suelen respetar el robots.txt pero rara \par # vez hacen un buen uso del sitio y abusan bastante... \par # A\'f1adir al gusto del consumidor...\par \par User-agent: MSIECrawler \par Disallow: /\par \par User-agent: WebCopier \par Disallow: /\par \par User-agent: HTTrack \par Disallow: /\par \par User-agent: Microsoft.URL.Control \par Disallow: /\par \par User-agent: libwww \par Disallow: /\par \par # \par # Slurp (Yahoo!), Noxtrum y el bot de MSN a veces tienen \par # idas de pinza, toca decirles que reduzcan la marcha. \par # El valor es en segundos y pod\'e9is dejarlo bajo e ir \par # subiendo hasta el punto \'f3ptimo. \par #\par \par User-agent: noxtrumbot \par Crawl-delay: 50\par \par User-agent: msnbot \par Crawl-delay: 30\par \par User-agent: Slurp \par Crawl-delay: 10\par }