{"id":128444,"date":"2025-03-17T15:45:01","date_gmt":"2025-03-17T14:45:01","guid":{"rendered":"https:\/\/quondos.com\/mag\/?p=128444"},"modified":"2025-03-17T15:45:06","modified_gmt":"2025-03-17T14:45:06","slug":"google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web","status":"publish","type":"post","link":"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/","title":{"rendered":"Google publica nueva gu\u00eda de Robots.txt para controlar el rastreo web"},"content":{"rendered":"\n<figure class=\"wp-block-image size-full\"><img loading=\"lazy\" decoding=\"async\" width=\"711\" height=\"360\" src=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2024\/03\/image-2.webp\" alt=\"\" class=\"wp-image-126571\" title=\"\" srcset=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2024\/03\/image-2.webp 711w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2024\/03\/image-2-300x152.webp 300w\" sizes=\"auto, (max-width: 711px) 100vw, 711px\" \/><\/figure>\n\n\n\n    <p><strong>Google ha lanzado una nueva gu\u00eda sobre Robots.txt<\/strong>, proporcionando informaci\u00f3n detallada para que editores y especialistas en SEO puedan gestionar el rastreo de los motores de b\u00fasqueda de manera m\u00e1s efectiva. Este documento incluye ejemplos pr\u00e1cticos sobre c\u00f3mo bloquear p\u00e1ginas espec\u00edficas, restringir bots y optimizar el comportamiento de rastreo.<\/p>\n\n    <div id=\"ez-toc-container\" class=\"ez-toc-v2_0_76 counter-hierarchy ez-toc-counter ez-toc-grey ez-toc-container-direction\">\n<div class=\"ez-toc-title-container\">\n<p class=\"ez-toc-title\" style=\"cursor:inherit\">\u00cdndice de contenidos<\/p>\n<span class=\"ez-toc-title-toggle\"><a href=\"#\" class=\"ez-toc-pull-right ez-toc-btn ez-toc-btn-xs ez-toc-btn-default ez-toc-toggle\" aria-label=\"Alternar tabla de contenidos\"><span class=\"ez-toc-js-icon-con\"><span class=\"\"><span class=\"eztoc-hide\" style=\"display:none;\">Toggle<\/span><span class=\"ez-toc-icon-toggle-span\"><svg style=\"fill: #999;color:#999\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" class=\"list-377408\" width=\"20px\" height=\"20px\" viewBox=\"0 0 24 24\" fill=\"none\"><path d=\"M6 6H4v2h2V6zm14 0H8v2h12V6zM4 11h2v2H4v-2zm16 0H8v2h12v-2zM4 16h2v2H4v-2zm16 0H8v2h12v-2z\" fill=\"currentColor\"><\/path><\/svg><svg style=\"fill: #999;color:#999\" class=\"arrow-unsorted-368013\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" width=\"10px\" height=\"10px\" viewBox=\"0 0 24 24\" version=\"1.2\" baseProfile=\"tiny\"><path d=\"M18.2 9.3l-6.2-6.3-6.2 6.3c-.2.2-.3.4-.3.7s.1.5.3.7c.2.2.4.3.7.3h11c.3 0 .5-.1.7-.3.2-.2.3-.5.3-.7s-.1-.5-.3-.7zM5.8 14.7l6.2 6.3 6.2-6.3c.2-.2.3-.5.3-.7s-.1-.5-.3-.7c-.2-.2-.4-.3-.7-.3h-11c-.3 0-.5.1-.7.3-.2.2-.3.5-.3.7s.1.5.3.7z\"\/><\/svg><\/span><\/span><\/span><\/a><\/span><\/div>\n<nav><ul class='ez-toc-list ez-toc-list-level-1 ' ><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-1\" href=\"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/#%C2%BFQue_es_Robotstxt_y_por_que_es_importante\" >\u00bfQu\u00e9 es Robots.txt y por qu\u00e9 es importante?<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-2\" href=\"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/#%C2%BFQue_novedades_trae_la_nueva_guia_de_Google\" >\u00bfQu\u00e9 novedades trae la nueva gu\u00eda de Google?<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-3\" href=\"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/#Funciones_avanzadas_del_archivo_Robotstxt\" >Funciones avanzadas del archivo Robots.txt<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-4\" href=\"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/#Como_editar_y_optimizar_Robotstxt\" >C\u00f3mo editar y optimizar Robots.txt<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-5\" href=\"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/#%C2%BFComo_afecta_esta_guia_a_los_expertos_en_SEO\" >\u00bfC\u00f3mo afecta esta gu\u00eda a los expertos en SEO?<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-6\" href=\"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/#Conclusion\" >Conclusi\u00f3n<\/a><\/li><\/ul><\/nav><\/div>\n<h2><span class=\"ez-toc-section\" id=\"%C2%BFQue_es_Robotstxt_y_por_que_es_importante\"><\/span>\u00bfQu\u00e9 es Robots.txt y por qu\u00e9 es importante?<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n    <p>El archivo <strong>Robots.txt<\/strong> es un protocolo web que lleva m\u00e1s de 30 a\u00f1os en funcionamiento y es ampliamente soportado por motores de b\u00fasqueda y otros rastreadores.<\/p>\n\n    <p>Seg\u00fan la nueva documentaci\u00f3n de Google, este archivo permite a los propietarios de sitios web <strong>controlar qu\u00e9 partes de su sitio pueden ser rastreadas<\/strong> por buscadores como Google, Bing y otros bots que lo respeten.<\/p>\n\n    <p>En caso de que un sitio no tenga un archivo Robots.txt, Google Search Console puede generar un <strong>error 404<\/strong>, pero seg\u00fan la gu\u00eda, este mensaje desaparecer\u00e1 despu\u00e9s de 30 d\u00edas o puede evitarse creando un archivo Robots.txt vac\u00edo.<\/p>\n\n    <h2><span class=\"ez-toc-section\" id=\"%C2%BFQue_novedades_trae_la_nueva_guia_de_Google\"><\/span>\u00bfQu\u00e9 novedades trae la nueva gu\u00eda de Google?<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n    <p>La nueva gu\u00eda publicada por Google explica desde <strong>los conceptos b\u00e1sicos hasta el uso avanzado<\/strong> del archivo Robots.txt.<\/p>\n\n    <p>En sus primeras secciones, se describe c\u00f3mo este archivo permite a los webmasters decidir si desean <strong>permitir o restringir el acceso a ciertas secciones<\/strong> de su sitio.<\/p>\n\n    <p>M\u00e1s adelante, se presentan reglas avanzadas para quienes necesitan un mayor control sobre los rastreadores.<\/p>\n\n    <h2><span class=\"ez-toc-section\" id=\"Funciones_avanzadas_del_archivo_Robotstxt\"><\/span>Funciones avanzadas del archivo Robots.txt<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n    <p>Entre las capacidades avanzadas que Google destaca en la nueva documentaci\u00f3n, se encuentran:<\/p>\n\n    <ul>\n        <li><strong>Definir reglas espec\u00edficas para distintos rastreadores<\/strong>, permitiendo bloquear ciertos bots mientras se permite el acceso a otros.<\/li>\n        <li><strong>Restringir el acceso a tipos espec\u00edficos de URL<\/strong>, como p\u00e1ginas de b\u00fasqueda internas o archivos PDF.<\/li>\n        <li><strong>Control granular sobre bots espec\u00edficos<\/strong>, estableciendo permisos diferentes seg\u00fan el tipo de rastreador.<\/li>\n        <li><strong>Incluir comentarios<\/strong> dentro del archivo para documentaci\u00f3n interna, facilitando su mantenimiento.<\/li>\n    <\/ul>\n\n    <p>Esta actualizaci\u00f3n refuerza la importancia del Robots.txt como una herramienta flexible para la <strong>gesti\u00f3n del rastreo web<\/strong>.<\/p>\n\n    <h2><span class=\"ez-toc-section\" id=\"Como_editar_y_optimizar_Robotstxt\"><\/span>C\u00f3mo editar y optimizar Robots.txt<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n    <p>Seg\u00fan la documentaci\u00f3n de Google, <strong>editar un archivo Robots.txt es un proceso sencillo<\/strong>. Al ser un archivo de texto plano, puede modificarse con cualquier editor b\u00e1sico.<\/p>\n\n    <p>Adem\u00e1s, muchos <strong>gestores de contenido<\/strong> como WordPress y Joomla cuentan con opciones integradas para modificar este archivo sin necesidad de acceder al servidor directamente.<\/p>\n\n    <p>Para evitar errores, Google recomienda utilizar herramientas de prueba para verificar que la sintaxis de Robots.txt sea correcta antes de implementarlo.<\/p>\n\n    <h2><span class=\"ez-toc-section\" id=\"%C2%BFComo_afecta_esta_guia_a_los_expertos_en_SEO\"><\/span>\u00bfC\u00f3mo afecta esta gu\u00eda a los expertos en SEO?<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n    <p>Para los especialistas en SEO, esta actualizaci\u00f3n de la documentaci\u00f3n de Robots.txt <strong>proporciona mejores directrices<\/strong> para optimizar el rastreo y la indexaci\u00f3n de sus sitios web.<\/p>\n\n    <p>Al implementar correctamente las reglas de Robots.txt, los sitios pueden <strong>evitar el rastreo innecesario de p\u00e1ginas internas<\/strong> y mejorar la eficiencia del rastreo de Googlebot.<\/p>\n\n    <p>Esto es clave para optimizar la velocidad de indexaci\u00f3n y asegurarse de que Google priorice las p\u00e1ginas m\u00e1s importantes del sitio.<\/p>\n\n    <h2><span class=\"ez-toc-section\" id=\"Conclusion\"><\/span>Conclusi\u00f3n<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n    <p>La nueva gu\u00eda de <strong>Google sobre Robots.txt<\/strong> es una herramienta esencial para SEOs y editores web que buscan optimizar la visibilidad de sus sitios en los motores de b\u00fasqueda.<\/p>\n\n    <p>Comprender y aplicar estas reglas permitir\u00e1 un mejor control sobre qu\u00e9 partes del sitio son accesibles a los buscadores, mejorando la eficiencia del rastreo y la estrategia de posicionamiento.<\/p>\n\n    <p>Para acceder a la documentaci\u00f3n completa, visita la <a href=\"https:\/\/developers.google.com\/search\/docs\/crawling-indexing\/robots-txt\" target=\"_blank\" rel=\"noopener\">gu\u00eda oficial de Google sobre Robots.txt<\/a>.<\/p>\n\n\n\n\n<p>Fuente: https:\/\/www.searchenginejournal.com\/google-publishes-new-robots-txt-explainer\/541921\/<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Google ha lanzado una nueva gu\u00eda sobre Robots.txt, proporcionando informaci\u00f3n detallada para que editores y especialistas en SEO puedan gestionar &#8230; <\/p>\n<p class=\"read-more-container\"><a title=\"Google publica nueva gu\u00eda de Robots.txt para controlar el rastreo web\" class=\"read-more button\" href=\"https:\/\/quondos.com\/mag\/google-publica-nueva-guia-de-robots-txt-para-controlar-el-rastreo-web\/#more-128444\" aria-label=\"Leer m\u00e1s sobre Google publica nueva gu\u00eda de Robots.txt para controlar el rastreo web\">Leer m\u00e1s<\/a><\/p>\n","protected":false},"author":850,"featured_media":126571,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[236],"tags":[],"class_list":["post-128444","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-seo","generate-columns","tablet-grid-50","mobile-grid-100","grid-parent","grid-50","no-featured-image-padding"],"_links":{"self":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/128444","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/users\/850"}],"replies":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/comments?post=128444"}],"version-history":[{"count":1,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/128444\/revisions"}],"predecessor-version":[{"id":128445,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/128444\/revisions\/128445"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media\/126571"}],"wp:attachment":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media?parent=128444"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/categories?post=128444"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/tags?post=128444"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}