{"id":127080,"date":"2024-06-12T10:05:55","date_gmt":"2024-06-12T08:05:55","guid":{"rendered":"https:\/\/quondos.com\/mag\/?p=127080"},"modified":"2024-06-12T10:07:31","modified_gmt":"2024-06-12T08:07:31","slug":"google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos","status":"publish","type":"post","link":"https:\/\/quondos.com\/mag\/google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos\/","title":{"rendered":"Google recuerda utilizar robots.txt para bloquear URL y evitar el desperdicio de recursos"},"content":{"rendered":"\n<figure class=\"wp-block-image size-full\"><img loading=\"lazy\" decoding=\"async\" width=\"1024\" height=\"1024\" src=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/11\/DALL\u00b7E-2023-11-13-12.31.40-An-illustration-showing-Google-developing-a-search-robot-named-Steve.-The-scene-is-set-in-a-high-tech-laboratory-with-Googles-logo-prominently-displa.webp\" alt=\"google bard\" class=\"wp-image-125751\" title=\"\" srcset=\"https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/11\/DALL\u00b7E-2023-11-13-12.31.40-An-illustration-showing-Google-developing-a-search-robot-named-Steve.-The-scene-is-set-in-a-high-tech-laboratory-with-Googles-logo-prominently-displa.webp 1024w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/11\/DALL\u00b7E-2023-11-13-12.31.40-An-illustration-showing-Google-developing-a-search-robot-named-Steve.-The-scene-is-set-in-a-high-tech-laboratory-with-Googles-logo-prominently-displa-300x300.webp 300w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/11\/DALL\u00b7E-2023-11-13-12.31.40-An-illustration-showing-Google-developing-a-search-robot-named-Steve.-The-scene-is-set-in-a-high-tech-laboratory-with-Googles-logo-prominently-displa-150x150.webp 150w, https:\/\/quondos.com\/mag\/wp-content\/uploads\/2023\/11\/DALL\u00b7E-2023-11-13-12.31.40-An-illustration-showing-Google-developing-a-search-robot-named-Steve.-The-scene-is-set-in-a-high-tech-laboratory-with-Googles-logo-prominently-displa-768x768.webp 768w\" sizes=\"auto, (max-width: 1024px) 100vw, 1024px\" \/><\/figure>\n\n\n\n<p>\nGoogle ha recordado a los propietarios de sitios web la importancia de utilizar el archivo <strong>robots.txt<\/strong> para bloquear las URLs de acci\u00f3n, como \u00aba\u00f1adir al carrito\u00bb, evitando as\u00ed el uso innecesario de recursos del servidor. \n<\/p>\n\n<div id=\"ez-toc-container\" class=\"ez-toc-v2_0_76 counter-hierarchy ez-toc-counter ez-toc-grey ez-toc-container-direction\">\n<div class=\"ez-toc-title-container\">\n<p class=\"ez-toc-title\" style=\"cursor:inherit\">\u00cdndice de contenidos<\/p>\n<span class=\"ez-toc-title-toggle\"><a href=\"#\" class=\"ez-toc-pull-right ez-toc-btn ez-toc-btn-xs ez-toc-btn-default ez-toc-toggle\" aria-label=\"Alternar tabla de contenidos\"><span class=\"ez-toc-js-icon-con\"><span class=\"\"><span class=\"eztoc-hide\" style=\"display:none;\">Toggle<\/span><span class=\"ez-toc-icon-toggle-span\"><svg style=\"fill: #999;color:#999\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" class=\"list-377408\" width=\"20px\" height=\"20px\" viewBox=\"0 0 24 24\" fill=\"none\"><path d=\"M6 6H4v2h2V6zm14 0H8v2h12V6zM4 11h2v2H4v-2zm16 0H8v2h12v-2zM4 16h2v2H4v-2zm16 0H8v2h12v-2z\" fill=\"currentColor\"><\/path><\/svg><svg style=\"fill: #999;color:#999\" class=\"arrow-unsorted-368013\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" width=\"10px\" height=\"10px\" viewBox=\"0 0 24 24\" version=\"1.2\" baseProfile=\"tiny\"><path d=\"M18.2 9.3l-6.2-6.3-6.2 6.3c-.2.2-.3.4-.3.7s.1.5.3.7c.2.2.4.3.7.3h11c.3 0 .5-.1.7-.3.2-.2.3-.5.3-.7s-.1-.5-.3-.7zM5.8 14.7l6.2 6.3 6.2-6.3c.2-.2.3-.5.3-.7s-.1-.5-.3-.7c-.2-.2-.4-.3-.7-.3h-11c-.3 0-.5.1-.7.3-.2.2-.3.5-.3.7s.1.5.3.7z\"\/><\/svg><\/span><\/span><\/span><\/a><\/span><\/div>\n<nav><ul class='ez-toc-list ez-toc-list-level-1 ' ><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-1\" href=\"https:\/\/quondos.com\/mag\/google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos\/#Google_recomienda_usar_robotstxt_para_bloquear_URLs_de_accion\" >Google recomienda usar robots.txt para bloquear URLs de acci\u00f3n<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-2\" href=\"https:\/\/quondos.com\/mag\/google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos\/#Refuerzo_de_las_mejores_practicas_de_decadas\" >Refuerzo de las mejores pr\u00e1cticas de d\u00e9cadas<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-3\" href=\"https:\/\/quondos.com\/mag\/google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos\/#Obediencia_y_excepciones\" >Obediencia y excepciones<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-4\" href=\"https:\/\/quondos.com\/mag\/google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos\/#Por_que_esto_es_importante\" >Por qu\u00e9 esto es importante<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-5\" href=\"https:\/\/quondos.com\/mag\/google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos\/#Como_esto_puede_ayudarte\" >C\u00f3mo esto puede ayudarte<\/a><\/li><\/ul><\/nav><\/div>\n<h2><span class=\"ez-toc-section\" id=\"Google_recomienda_usar_robotstxt_para_bloquear_URLs_de_accion\"><\/span>Google recomienda usar robots.txt para bloquear URLs de acci\u00f3n<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>\nSeg\u00fan Gary Illyes, analista de Google, es fundamental usar el archivo <strong>robots.txt<\/strong> para impedir que los rastreadores accedan a URLs que desencadenan acciones como a\u00f1adir art\u00edculos al carrito o a la lista de deseos.\n<\/p>\n\n<p>\nIllyes destac\u00f3 en una publicaci\u00f3n de LinkedIn que muchas quejas sobre el tr\u00e1fico innecesario de rastreadores, que sobrecargan los servidores, provienen de bots de motores de b\u00fasqueda rastreando URLs destinadas a acciones de usuario.\n<\/p>\n\n<p>\n\u00c9l escribi\u00f3: \u00abMirando lo que estamos rastreando de los sitios en las quejas, demasiadas veces son URLs de acci\u00f3n como &#8216;a\u00f1adir al carrito&#8217; y &#8216;a\u00f1adir a la lista de deseos&#8217;. Estas son in\u00fatiles para los rastreadores y probablemente no quieras que sean rastreadas\u00bb.\n<\/p>\n\n<p>\nPara evitar esta carga innecesaria en el servidor, Illyes recomend\u00f3 bloquear el acceso en el archivo <strong>robots.txt<\/strong> a las URLs con par\u00e1metros como \u201c?add_to_cart\u201d o \u201c?add_to_wishlist\u201d.\n<\/p>\n\n<p>\nComo ejemplo, sugiri\u00f3: \u00abSi tienes URLs como:\n<\/p>\n\n<p><a href=\"https:\/\/example.com\/product\/scented-candle-v1?add_to_cart\" target=\"_blank\" rel=\"noopener\">https:\/\/example.com\/product\/scented-candle-v1?add_to_cart<\/a> y <a href=\"https:\/\/example.com\/product\/scented-candle-v1?add_to_wishlist\" target=\"_blank\" rel=\"noopener\">https:\/\/example.com\/product\/scented-candle-v1?add_to_wishlist<\/a>, deber\u00edas a\u00f1adir una regla de desautorizaci\u00f3n para ellas en tu archivo <strong>robots.txt<\/strong>.\u00bb\n<\/p>\n\n<p>\nAunque el uso del m\u00e9todo <strong>HTTP POST<\/strong> tambi\u00e9n puede evitar el rastreo de tales URLs, Illyes se\u00f1al\u00f3 que los rastreadores a\u00fan pueden hacer solicitudes POST, por lo que sigue siendo aconsejable usar <strong>robots.txt<\/strong>.\n<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Refuerzo_de_las_mejores_practicas_de_decadas\"><\/span>Refuerzo de las mejores pr\u00e1cticas de d\u00e9cadas<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>\nAlan Perkins, quien particip\u00f3 en el hilo, se\u00f1al\u00f3 que esta gu\u00eda refleja los est\u00e1ndares web introducidos en la d\u00e9cada de 1990 por las mismas razones.\n<\/p>\n\n<p>\nCit\u00f3 un documento de 1993 titulado \u00abUn est\u00e1ndar para la exclusi\u00f3n de robots\u00bb: \u00abEn 1993 y 1994 ha habido ocasiones en las que los robots han visitado servidores WWW donde no eran bienvenidos por diversas razones&#8230; los robots recorrieron partes de servidores WWW que no eran adecuadas, p. ej., \u00e1rboles virtuales muy profundos, informaci\u00f3n duplicada, informaci\u00f3n temporal o scripts CGI con efectos secundarios (como votaciones)\u00bb.\n<\/p>\n\n<p>\nEl est\u00e1ndar <strong>robots.txt<\/strong>, proponiendo reglas para restringir el acceso de los rastreadores bien comportados, surgi\u00f3 como una soluci\u00f3n de \u00abconsenso\u00bb entre los interesados en la web en 1994.\n<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Obediencia_y_excepciones\"><\/span>Obediencia y excepciones<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>\nIllyes afirm\u00f3 que los rastreadores de Google obedecen completamente las reglas de <strong>robots.txt<\/strong>, con raras excepciones documentadas a fondo para escenarios que involucran \u00abrecuperaciones desencadenadas por el usuario o contractuales\u00bb.\n<\/p>\n\n<p>\nEsta adhesi\u00f3n al protocolo <strong>robots.txt<\/strong> ha sido un pilar de las pol\u00edticas de rastreo web de Google.\n<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Por_que_esto_es_importante\"><\/span>Por qu\u00e9 esto es importante<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>\nAunque el consejo puede parecer rudimentario, la reaparici\u00f3n de esta pr\u00e1ctica recomendada de d\u00e9cadas subraya su relevancia.\n<\/p>\n\n<p>\nAl aprovechar el est\u00e1ndar <strong>robots.txt<\/strong>, los sitios pueden ayudar a controlar los rastreadores excesivamente entusiastas que consumen ancho de banda con solicitudes improductivas.\n<\/p>\n\n<h2><span class=\"ez-toc-section\" id=\"Como_esto_puede_ayudarte\"><\/span>C\u00f3mo esto puede ayudarte<span class=\"ez-toc-section-end\"><\/span><\/h2>\n\n<p>\nYa sea que administres un peque\u00f1o blog o una gran plataforma de comercio electr\u00f3nico, seguir el consejo de Google para utilizar <strong>robots.txt<\/strong> y bloquear el acceso de los rastreadores a las URLs de acci\u00f3n puede ayudarte de varias maneras:\n<\/p>\n\n<ul>\n    <li><strong>Reducci\u00f3n de la carga del servidor<\/strong>: Puedes reducir las solicitudes innecesarias al servidor y el uso del ancho de banda evitando que los rastreadores accedan a URLs que invocan acciones como a\u00f1adir art\u00edculos al carrito o a la lista de deseos.<\/li>\n    <li><strong>Mejora de la eficiencia del rastreo<\/strong>: Dar reglas m\u00e1s expl\u00edcitas en tu archivo <strong>robots.txt<\/strong> sobre qu\u00e9 URLs deben evitar los rastreadores puede llevar a un rastreo m\u00e1s eficiente de las p\u00e1ginas y contenido que deseas que se indexen y clasifiquen.<\/li>\n    <li><strong>Mejor experiencia de usuario<\/strong>: Con los recursos del servidor enfocados en las acciones reales de los usuarios en lugar de en los golpes innecesarios de los rastreadores, los usuarios finales probablemente experimentar\u00e1n tiempos de carga m\u00e1s r\u00e1pidos y una funcionalidad m\u00e1s fluida.<\/li>\n    <li><strong>Alin\u00e9monos con los est\u00e1ndares<\/strong>: Implementar esta gu\u00eda pone tu sitio en conformidad con los est\u00e1ndares ampliamente adoptados del protocolo <strong>robots.txt<\/strong>, que han sido pr\u00e1cticas recomendadas en la industria durante d\u00e9cadas.<\/li>\n<\/ul>\n\n<p>\nRevisar las directivas de <strong>robots.txt<\/strong> podr\u00eda ser un paso simple pero impactante para los sitios web que buscan ejercer m\u00e1s control sobre la actividad de los rastreadores.\n<\/p>\n\n\n\n\n\n<p>Fuente: https:\/\/www.searchenginejournal.com\/google-reminds-websites-to-use-robots-txt-to-block-action-urls\/519215\/<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Google ha recordado a los propietarios de sitios web la importancia de utilizar el archivo robots.txt para bloquear las URLs &#8230; <\/p>\n<p class=\"read-more-container\"><a title=\"Google recuerda utilizar robots.txt para bloquear URL y evitar el desperdicio de recursos\" class=\"read-more button\" href=\"https:\/\/quondos.com\/mag\/google-recuerda-utilizar-robots-txt-para-bloquear-url-y-evitar-el-desperdicio-de-recursos\/#more-127080\" aria-label=\"Leer m\u00e1s sobre Google recuerda utilizar robots.txt para bloquear URL y evitar el desperdicio de recursos\">Leer m\u00e1s<\/a><\/p>\n","protected":false},"author":850,"featured_media":125751,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[236],"tags":[],"class_list":["post-127080","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-seo","generate-columns","tablet-grid-50","mobile-grid-100","grid-parent","grid-50","no-featured-image-padding"],"_links":{"self":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/127080","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/users\/850"}],"replies":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/comments?post=127080"}],"version-history":[{"count":4,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/127080\/revisions"}],"predecessor-version":[{"id":127085,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/posts\/127080\/revisions\/127085"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media\/125751"}],"wp:attachment":[{"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/media?parent=127080"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/categories?post=127080"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/quondos.com\/mag\/wp-json\/wp\/v2\/tags?post=127080"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}