{"id":128766,"date":"2025-05-01T21:09:57","date_gmt":"2025-05-01T19:09:57","guid":{"rendered":"https:\/\/quondos.com\/mag\/?p=128766"},"modified":"2025-05-01T21:09:59","modified_gmt":"2025-05-01T19:09:59","slug":"robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario","status":"publish","type":"post","link":"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/","title":{"rendered":"Robots.txt en WordPress: qu\u00e9 incluir para mejorar el SEO y reducir el rastreo innecesario"},"content":{"rendered":"\n<figure class=\"wp-block-image size-large\"><img loading=\"lazy\" decoding=\"async\" width=\"1024\" height=\"654\" src=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/wordpress-1024x654.jpg\" alt=\"\" class=\"wp-image-124491\" title=\"\" srcset=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/wordpress-1024x654.jpg 1024w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/wordpress-300x191.jpg 300w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/wordpress-768x490.jpg 768w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/05\/wordpress.jpg 1042w\" sizes=\"auto, (max-width: 1024px) 100vw, 1024px\" \/><\/figure>\n\n\n\n<p>\u00bfSab\u00edas que un simple archivo puede marcar la diferencia entre un sitio web optimizado y uno que despilfarra recursos en el rastreo de Google? Nos referimos al <strong>robots.txt en WordPress<\/strong>, un archivo que muchos ignoran pero que es clave para el SEO t\u00e9cnico.<\/p>\n\n<div id=\"ez-toc-container\" class=\"ez-toc-v2_0_76 counter-hierarchy ez-toc-counter ez-toc-grey ez-toc-container-direction\">\n<div class=\"ez-toc-title-container\">\n<p class=\"ez-toc-title\" style=\"cursor:inherit\">\u00cdndice de contenidos<\/p>\n<span class=\"ez-toc-title-toggle\"><a href=\"#\" class=\"ez-toc-pull-right ez-toc-btn ez-toc-btn-xs ez-toc-btn-default ez-toc-toggle\" aria-label=\"Alternar tabla de contenidos\"><span class=\"ez-toc-js-icon-con\"><span class=\"\"><span class=\"eztoc-hide\" style=\"display:none;\">Toggle<\/span><span class=\"ez-toc-icon-toggle-span\"><svg style=\"fill: #999;color:#999\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" class=\"list-377408\" width=\"20px\" height=\"20px\" viewBox=\"0 0 24 24\" fill=\"none\"><path d=\"M6 6H4v2h2V6zm14 0H8v2h12V6zM4 11h2v2H4v-2zm16 0H8v2h12v-2zM4 16h2v2H4v-2zm16 0H8v2h12v-2z\" fill=\"currentColor\"><\/path><\/svg><svg style=\"fill: #999;color:#999\" class=\"arrow-unsorted-368013\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" width=\"10px\" height=\"10px\" viewBox=\"0 0 24 24\" version=\"1.2\" baseProfile=\"tiny\"><path d=\"M18.2 9.3l-6.2-6.3-6.2 6.3c-.2.2-.3.4-.3.7s.1.5.3.7c.2.2.4.3.7.3h11c.3 0 .5-.1.7-.3.2-.2.3-.5.3-.7s-.1-.5-.3-.7zM5.8 14.7l6.2 6.3 6.2-6.3c.2-.2.3-.5.3-.7s-.1-.5-.3-.7c-.2-.2-.4-.3-.7-.3h-11c-.3 0-.5.1-.7.3-.2.2-.3.5-.3.7s.1.5.3.7z\"\/><\/svg><\/span><\/span><\/span><\/a><\/span><\/div>\n<nav><ul class='ez-toc-list ez-toc-list-level-1 ' ><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-1\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#El_archivo_robotstxt_de_WordPress_esta_ahi_aunque_no_lo_veas\" >El archivo robots.txt de WordPress est\u00e1 ah\u00ed, aunque no lo veas<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-2\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#No_te_olvides_de_incluir_tus_sitemaps_XML\" >No te olvides de incluir tus sitemaps XML<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-3\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#No_bloquees_CSS_JavaScript_ni_medios\" >No bloquees CSS, JavaScript ni medios<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-4\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#Evita_que_se_indexen_tus_sitios_de_pruebas\" >Evita que se indexen tus sitios de pruebas<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-5\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#Que_rutas_puedes_bloquear_sin_afectar_el_SEO\" >Qu\u00e9 rutas puedes bloquear sin afectar el SEO<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-6\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#Controla_los_parametros_de_URL_poco_utiles\" >Controla los par\u00e1metros de URL poco \u00fatiles<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-7\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#Evita_indexar_taxonomias_y_busquedas_internas_sin_valor\" >Evita indexar taxonom\u00edas y b\u00fasquedas internas sin valor<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-8\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#Monitorea_el_rendimiento_del_archivo_robotstxt\" >Monitorea el rendimiento del archivo robots.txt<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-9\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#Un_pequeno_cambio_que_puede_hacer_una_gran_diferencia\" >Un peque\u00f1o cambio que puede hacer una gran diferencia<\/a><\/li><\/ul><\/nav><\/div>\n<h2><span class=\"ez-toc-section\" id=\"El_archivo_robotstxt_de_WordPress_esta_ahi_aunque_no_lo_veas\"><\/span>El archivo robots.txt de WordPress est\u00e1 ah\u00ed, aunque no lo veas<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Por defecto, WordPress genera un archivo <strong>robots.txt virtual<\/strong>, el cual puedes ver a\u00f1adiendo <em>\/robots.txt<\/em> a la URL de tu web. Este archivo no existe f\u00edsicamente en tu servidor, pero cumple su funci\u00f3n b\u00e1sica.<\/p>\n\n<p>Para personalizarlo, solo necesitas subir tu propio archivo robots.txt al <strong>directorio ra\u00edz de tu instalaci\u00f3n<\/strong>. Puedes hacerlo con un cliente FTP o desde plugins como <a href=\"https:\/\/yoast.com\/\" target=\"_blank\" rel=\"noopener\">Yoast SEO<\/a>, que te permiten editarlo directamente desde el panel de WordPress.<\/p>\n\n<p>El archivo por defecto suele tener este aspecto:<\/p>\n\n<pre>\nUser-agent: *\nDisallow: \/wp-admin\/\nAllow: \/wp-admin\/admin-ajax.php\n<\/pre>\n\n<p>Este contenido es seguro, pero <strong>no es suficiente<\/strong> si quieres sacarle el m\u00e1ximo provecho al rastreo de tu sitio.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"No_te_olvides_de_incluir_tus_sitemaps_XML\"><\/span>No te olvides de incluir tus sitemaps XML<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Uno de los primeros pasos para mejorar el archivo es asegurarte de que tus <strong>sitemaps XML est\u00e9n listados<\/strong> expl\u00edcitamente. Esto facilita que los motores de b\u00fasqueda encuentren todas las URLs importantes.<\/p>\n\n<pre>\nSitemap: https:\/\/tusitio.com\/sitemap_index.xml\nSitemap: https:\/\/tusitio.com\/sitemap2.xml\n<\/pre>\n\n<p>Si est\u00e1s usando un plugin como Yoast o Rank Math, ellos ya generan estos sitemaps autom\u00e1ticamente, pero <strong>no los a\u00f1aden al robots.txt a menos que t\u00fa lo hagas<\/strong>.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"No_bloquees_CSS_JavaScript_ni_medios\"><\/span>No bloquees CSS, JavaScript ni medios<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Antes era com\u00fan bloquear directorios como <strong>\/wp-includes\/ o \/wp-content\/<\/strong>, pero esto ya no se recomienda. Google necesita acceder a los archivos CSS y JS para renderizar correctamente tu web.<\/p>\n\n<p>Adem\u00e1s, dentro de <strong>\/wp-content\/uploads\/<\/strong> est\u00e1n todas tus im\u00e1genes, v\u00eddeos y archivos multimedia, que s\u00ed quieres que se indexen. Bloquear esta carpeta puede hacer que pierdas tr\u00e1fico desde Google Im\u00e1genes, por ejemplo.<\/p>\n\n<p>En resumen: <strong>deja que los bots accedan a lo necesario para entender tu contenido<\/strong>.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Evita_que_se_indexen_tus_sitios_de_pruebas\"><\/span>Evita que se indexen tus sitios de pruebas<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Si trabajas con entornos de staging o desarrollo, es esencial que <strong>Google no los indexe<\/strong>. Puedes hacerlo desde WordPress marcando la opci\u00f3n \u201cDisuadir a los motores de b\u00fasqueda de indexar este sitio\u201d.<\/p>\n\n<p>Esto a\u00f1ade autom\u00e1ticamente una directiva en robots.txt:<\/p>\n\n<pre>\nUser-agent: *\nDisallow: \/\n<\/pre>\n\n<p>No est\u00e1 de m\u00e1s combinarlo con una etiqueta <strong>noindex<\/strong> para asegurarte del todo. Y, muy importante: <strong>revisa esta configuraci\u00f3n antes de poner el sitio en producci\u00f3n<\/strong>.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Que_rutas_puedes_bloquear_sin_afectar_el_SEO\"><\/span>Qu\u00e9 rutas puedes bloquear sin afectar el SEO<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Algunas rutas est\u00e1ndar de WordPress <strong>no aportan valor a nivel SEO<\/strong> y puedes bloquearlas para evitar rastreo innecesario. Por ejemplo:<\/p>\n\n<pre>\nDisallow: \/trackback\/\nDisallow: \/comments\/feed\/\nDisallow: *\/embed\/\nDisallow: \/cgi-bin\/\nDisallow: \/wp-login.php\n<\/pre>\n\n<p>Esto <strong>reduce el n\u00famero de URLs sin importancia<\/strong> que los bots visitan, liberando recursos para rastrear lo que realmente importa.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Controla_los_parametros_de_URL_poco_utiles\"><\/span>Controla los par\u00e1metros de URL poco \u00fatiles<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Algunas URLs generadas autom\u00e1ticamente por WordPress, como las que incluyen <strong>par\u00e1metros de respuesta a comentarios<\/strong> o versiones de impresi\u00f3n, no deber\u00edan ser rastreadas:<\/p>\n\n<pre>\nDisallow: \/*?*replytocom=\nDisallow: \/*?*print=\n<\/pre>\n\n<p>Puedes usar <a href=\"https:\/\/search.google.com\/search-console\/parameters\" target=\"_blank\" rel=\"noopener\">Google Search Console<\/a> para analizar qu\u00e9 par\u00e1metros est\u00e1n generando URLs innecesarias y decidir si bloquear m\u00e1s.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Evita_indexar_taxonomias_y_busquedas_internas_sin_valor\"><\/span>Evita indexar taxonom\u00edas y b\u00fasquedas internas sin valor<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Las p\u00e1ginas de etiquetas (<strong>\/tag\/<\/strong>), los resultados de b\u00fasqueda internos y las paginaciones suelen aportar poco valor si no est\u00e1n bien trabajadas. Considera bloquearlas:<\/p>\n\n<pre>\nDisallow: \/tag\/\nDisallow: \/page\/\nDisallow: \/?s=\n<\/pre>\n\n<p>Sin embargo, si usas p\u00e1ginas de etiquetas como parte de tu estrategia SEO, entonces <strong>no las bloquees<\/strong>. Todo depende de c\u00f3mo estructures tu contenido y enlazado interno.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Monitorea_el_rendimiento_del_archivo_robotstxt\"><\/span>Monitorea el rendimiento del archivo robots.txt<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Una vez hecho el trabajo, toca <strong>verificar que todo funcione correctamente<\/strong>. Google Search Console es tu mejor aliado para esto. Revisa:<\/p>\n\n<ul>\n  <li><strong>Estad\u00edsticas de rastreo<\/strong> en el panel de Configuraci\u00f3n<\/li>\n  <li>Si las URLs bloqueadas realmente no est\u00e1n siendo indexadas<\/li>\n  <li>Que tus sitemaps est\u00e9n limpios y actualizados<\/li>\n<\/ul>\n\n<p>Adem\u00e1s, herramientas como Screaming Frog o Plesk tambi\u00e9n pueden ayudarte a detectar posibles errores o \u00e1reas de mejora.<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Un_pequeno_cambio_que_puede_hacer_una_gran_diferencia\"><\/span>Un peque\u00f1o cambio que puede hacer una gran diferencia<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>Optimizar tu archivo robots.txt no deber\u00eda tomarte m\u00e1s de <strong>30 minutos<\/strong>, pero puede ahorrarte cientos o miles de rastreos innecesarios a lo largo del tiempo.<\/p>\n\n<p>No se trata solo de proteger tu servidor o evitar indexar contenido duplicado. Se trata de <strong>enviar se\u00f1ales claras a Google<\/strong> sobre qu\u00e9 partes de tu web merecen atenci\u00f3n.<\/p>\n\n<p>\u00bfQuieres mejorar el posicionamiento de tu web? Empieza por aqu\u00ed. El robots.txt puede que no sea glamuroso, pero sin duda es una de las herramientas m\u00e1s efectivas del SEO t\u00e9cnico.<\/p>\n\n\n\n\n\n\n\n\n\n\n\n<p>Fuente: https:\/\/www.searchenginejournal.com\/robots-txt-wordpress\/544255\/<\/p>\n","protected":false},"excerpt":{"rendered":"<p>\u00bfSab\u00edas que un simple archivo puede marcar la diferencia entre un sitio web optimizado y uno que despilfarra recursos en &#8230; <\/p>\n<p class=\"read-more-container\"><a title=\"Robots.txt en WordPress: qu\u00e9 incluir para mejorar el SEO y reducir el rastreo innecesario\" class=\"read-more button\" href=\"https:\/\/quondos.com\/mag\/robots-txt-en-wordpress-que-incluir-para-mejorar-el-seo-y-reducir-el-rastreo-innecesario\/#more-128766\" aria-label=\"Leer m\u00e1s sobre Robots.txt en WordPress: qu\u00e9 incluir para mejorar el SEO y reducir el rastreo innecesario\">Leer m\u00e1s<\/a><\/p>\n","protected":false},"author":850,"featured_media":124491,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[163],"tags":[],"class_list":["post-128766","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-diseno-web","generate-columns","tablet-grid-50","mobile-grid-100","grid-parent","grid-50","no-featured-image-padding"],"_links":{"self":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/128766","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/users\/850"}],"replies":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/comments?post=128766"}],"version-history":[{"count":1,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/128766\/revisions"}],"predecessor-version":[{"id":128767,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/128766\/revisions\/128767"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media\/124491"}],"wp:attachment":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media?parent=128766"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/categories?post=128766"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/tags?post=128766"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}